社区里的爬行者

你好 Vidyaranjan,

请查看 /admin/reports/web_crawlers 以获取有关爬虫的详细报告。然后,您可以通过将它们添加到“屏蔽爬虫用户代理”站点设置中,来屏蔽任何您认为没有帮助或无用的爬虫。该设置接受用户代理字符串中存在的、不区分大小写的单词。