FYI - El Blog de Cloudflare - Pay per crawl

General
1
5 Me gusta
2

Eso sería justo.

3

Dado que parece que Clouldflare ha implementado algunas de estas restricciones de rastreadores, publico lo que sucede en el sitio de SWI-Prolog como referencia.

Este gráfico de barras muestra las visitas consolidadas heredadas del 20 de junio al 3 de julio de 2025, desglosadas en usuarios registrados, usuarios anónimos y rastreadores. (Subtitulado por IA)
Este gráfico de barras muestra las visitas consolidadas heredadas del 20 de junio al 3 de julio de 2025, desglosadas en usuarios registrados, usuarios anónimos y rastreadores. (Subtitulado por IA)1096×303 8.46 KB

Mismo informe, pero más tarde el mismo día.

Un gráfico de barras muestra las visitas consolidadas heredadas del 24 de junio de 2025 al 2 de julio de 2025, distinguiendo entre usuarios registrados, usuarios anónimos y rastreadores. (Subtitulado por IA)
Un gráfico de barras muestra las visitas consolidadas heredadas del 24 de junio de 2025 al 2 de julio de 2025, distinguiendo entre usuarios registrados, usuarios anónimos y rastreadores. (Subtitulado por IA)1087×302 8.4 KB

Lista de rastreadores y recuento de visitas a páginas en formato CSV para el foro de SWI-Prolog el 03 de julio de 2025. Nota: El día no ha terminado, por lo que se podrían ver más páginas, lo que aumentaría los recuentos. Esto sí muestra qué rastreadores están activos y cuánto están descargando.

web-crawlers-250703-213320.csv (4.4 KB)

1 me gusta