Bingbotがまたやらかした？

[jabeler (James)]

2018年から2020年にかけて、bingbotが非常に高いレートでクロールしていたというこのスレッドを見つけました。

当社のサイトでもこれを確認していますが、いつから問題になっているのかは不明です。

下のスクリーンショットでは、ランキングは以下の通りです。

1. Bingbot
2. Yandex
3. Bingbot (モバイル)
4. サイトモニター
5. 画像ボット
6. Google

GoogleはBingの10倍以上のトラフィックをもたらしていますが、クローラーのヒット数は約12%しか使用していません。

他に同様の統計を見ている方はいらっしゃいますか？

今のところ、bingbotをslow down crawler user agentsリストに追加しました。

[jabeler (James)]

数日経ちましたが、今のところ順調です。