É um fato que mecanismos de busca, bots podem indexar tópicos em uma categoria no Discourse. Como bloquear Google, Bing, Yandex, … de indexar tópicos de uma categoria?
Aguardamos o apoio de especialistas em Discourse.
1 curtida
Você pode alterar a permissão da categoria para TL0 para que apenas usuários logados a vejam e também para bloquear bots.
6 curtidas
Se o que o Don sugeriu funcionar, use-o. É a única maneira 100% garantida. Mas se esse fórum precisa ficar aberto para visitantes aleatórios, você não pode usar TL0. Claro, você pode usar User-agent: * Disallow: / ou meta similar, mas às vezes isso é respeitado e às vezes não. Se alguém compartilhar um link usando o Gmail, o Google indexará, não importa o que você tenha no robots.txt ou meta.
E esses truques só são eficazes se um bot obedecer a eles. A maioria dos crawlers de SEO não segue. E então há um zilhão de bots maliciosos e script kiddies tentando fazer algo.
Portanto, o que você tem que fazer depende do nível de privacidade que você está procurando.
4 curtidas