蜘蛛占我们流量的大部分！

[supermathie (Michael Brown)]

感谢您的赞赏；随着抓取活动的增加，这已成为我们许多客户的担忧。

您可以查看您的机器人报告并阻止最恶劣的网络爬虫访问您的网站，这会是一个好的开始。

我们正在着手开发更好的管理工具，但目前除非出现严重问题，否则请不必担心。