Es ist Tatsache, dass Suchmaschinen und Bots Themen in einer Kategorie auf Discourse indizieren können. Wie kann man Google, Bing, Yandex usw. daran hindern, Themen einer Kategorie zu indizieren?
Wir freuen uns auf die Unterstützung von Discourse-Experten.
Sie können die Kategorieberechtigung auf TL0 ändern, sodass nur angemeldete Benutzer sie sehen und Bots blockiert werden.
Wenn das von Don vorgeschlagene funktioniert, benutze es. Es ist der einzig 100% sichere Weg. Aber wenn dieses Forum für zufällige Besucher offen sein muss, kannst du TL0 nicht verwenden. Sicher, du kannst User-agent: * Disallow: / oder ähnliche Meta-Tags verwenden, aber manchmal werden diese beachtet und manchmal nicht. Wenn jemand einen Link über Gmail teilt, wird Google ihn indexieren, egal was du in deiner robots.txt oder in Meta-Tags hast.
Und diese Tricks sind nur dann wirksam, wenn ein Bot sie befolgt. Die meisten SEO-Crawler befolgen sie nicht. Und dann gibt es noch eine Unmenge von bösartigen Bots und Script-Kiddies, die versuchen, etwas zu tun.
Was du also tun musst, hängt davon ab, welche Art von Privatsphäre du suchst.