Besoin de trouver une solution pour bloquer l'indexation des topics d'une catégorie

Il est un fait que les moteurs de recherche, les robots peuvent indexer des sujets dans une catégorie sur Discourse. Comment bloquer Google, Bing, Yandex, … de l’indexation des sujets d’une catégorie ?

Nous attendons le soutien des experts de Discourse.

1 « J'aime »

Vous pouvez changer la permission de la catégorie en TL0 afin que seuls les utilisateurs connectés la voient et cela bloquera également les bots.

6 « J'aime »

Si ce que Don a suggéré fonctionne, utilisez-le. C’est la seule façon sûre à 100 %. Mais si ce forum doit être ouvert aux visiteurs aléatoires, vous ne pouvez pas utiliser TL0. Bien sûr, vous pouvez utiliser User-agent: * Disallow: / ou une meta similaire, mais parfois elles sont respectées et parfois non. Si quelqu’un partage un lien en utilisant gmail, Google l’indexera, peu importe ce que vous avez dans robots.txt ou meta.

Et ces astuces ne sont efficaces que si un bot les respecte. La plupart des robots d’exploration SEO ne les suivent pas. Et puis il y a une myriade de robots malveillants et de script kiddies qui essaient de faire quelque chose.

Donc, ce que vous devez faire dépend du niveau de confidentialité que vous recherchez.

4 « J'aime »