我找到了这个帖子,时间是 2018-2020 年,其中发现 bingbot 的爬取率非常高。
我在我们的网站上看到了这个情况,但不确定这个问题存在多久了。
在下面的截图中,排名如下:
- Bingbot
- Yandex
- Bingbot (mobile)
- Site monitor
- Some image bot
Google 带来的入站流量是 Bing 的 10 倍以上,而爬虫访问量仅占约 12%。
还有其他人看到类似的统计数据吗?
目前,我已将 bingbot 添加到 slow down crawler user agents 列表中。

