Hola Vidyaranjan,
Intenta revisar /admin/reports/web_crawlers para obtener un informe detallado sobre los rastreadores. Luego, puedes proceder a bloquear aquellos que no consideres útiles o beneficiosos agregándolos a la configuración del sitio blocked crawler user agents. Esa configuración acepta una palabra que no distingue entre mayúsculas y minúsculas y que debe aparecer en la cadena del user agent.