Welche Bedingungen machen einen Beitrag für Suchmaschinen nicht crawlbar?

Unter welchen Bedingungen kann ein Beitrag von Suchmaschinen nicht gecrawlt werden?

Im Lebenszyklus eines Themas: Unter welchen Bedingungen wird es für Suchmaschinen-Crawler crawlbare/indexierbar?

Einige Möglichkeiten (und ich vermute, es gibt weitere, die hier nicht erwähnt sind), die ich mir frage, sind:

  • Wenn ein ursprüngliches Thema erstellt, eingereicht und von einem „Beobachtete Wörter“-Filter abgefangen wird (Blockiert oder Genehmigung erforderlich)

  • Wenn ein Thema als „Nicht gelistet“ markiert wird, wird es dann aus dem Status „crawlbare“ entfernt?

  • Wenn ein Thema gelöscht wird, wird es dann aus dem Status „crawlbare“ entfernt?

  • Wenn ein Beitrag markiert wird, wird er dann aus dem Status „crawlbare“ entfernt?

Ich vermute, die Frage könnte auch so beantwortet werden: Unter welchen Bedingungen ist ein Beitrag NICHT crawlbare?

Ja, alles oben Genannte ist korrekt. Ein weiterer Faktor, der verhindern kann, dass ein Thema gecrawlt wird, ist die Zuordnung des Themas zu einer Kategorie, die so konfiguriert ist, dass anonyme Benutzer keinen Zugriff darauf haben. Alle Themen auf einer Discourse-Website können durch Aktivieren der Site-Einstellung „Login erforderlich