Notamos un aumento en las visitas de páginas anónimas (no de bots) en forum.makerforums.info y descubrimos que estaban asociadas con nombres de host crawl-$IP.googlebot.com en el bloque de red 66.249/16. Descubrí que Google anunció recientemente que va a cambiar sus cadenas de agente de usuario:
Informes (menor): El informe era simplemente incorrecto, ya que el gráfico no mostraba la actividad como de “Crawlers” sino como “Anónima”.
Indexación (importante): ¿Funciona el código que presenta la página completa y desactiva el desplazamiento infinito con los nuevos agentes de usuario? (Si no es así, es posible que simplemente hayamos estado mal indexados…)
Acabo de probar la detección de rastreadores con los agentes de usuario mencionados en la publicación del blog y todo parece estar bien. Puedes probarlo tú mismo usando un plugin de navegador de tu elección, configurando uno de los agentes de usuario y visitando tu sitio.
Los informes utilizan datos del RequestTracker, que depende de la misma detección de rastreadores, por lo que no estoy seguro de por qué ves que los bots se cuenten como tráfico anónimo.
¡Ajá! Aunque pensé que había visto los nuevos agentes de usuario, estaba equivocado. Búsqueda de registros deficiente. Las nuevas cadenas de versión de Chrome que vi provenían de google-proxy-$IP.google.com y eran tráfico real que pasaba por el proxy de Google.
Muy lo siento, debería haber profundizado más. Pero supongo que ahora queda registrado aquí que las nuevas cadenas de agente de usuario son correctas para la próxima persona confundida que venga a buscar.