Высокая нагрузка на краулеры?

По-моему, значение слишком высокое. Что-то не так?

Вы можете увидеть, кто это:

/admin/reports/web_crawlers

И добавить их сюда:

admin/site_settings/category/all_results?filter=crawler user agents

В последнее время вокруг правил сканирования произошло много изменений из-за того, что Google изменил поведение robots.txt, поэтому это может быть нормальным.

Окей, большое спасибо.

За исключением данных, которые у вас есть, в системе обнаружен неавторизованный краулер! Заблокируйте его через настройки вашего сайта.