Existem alguns rastreadores em nosso site. Existe algum risco de que eles tenham acesso ao conteúdo? Qual é uma « carga/risco aceitável de rastreador » antes que eu tenha que tomar medidas de bloqueio com as quais tenho pouca ou nenhuma experiência?

O que os crawlers podem ver?

HAWK (Hawk) Fevereiro 4, 2024, 2:41am 6

1 curtida

Tópico		Respostas	Visualizações
How to protect myself from bots crawling my Discourse instance? Support	6	1606	17 de Janeiro de 2022
Controlling Web Crawlers For a Site Site Management how-to	10	2379	19 de Julho de 2025
Smarter handling of random crawler traffic Feature	2	3499	29 de Março de 2018
MegaIndex bot did about 4,000 pageviews on one day Community	40	4520	2 de Dezembro de 2023
How to allow user-agent access to private discourse? Support	10	2017	25 de Novembro de 2018