User agent dei crawler web: i Qwantbot sono sempre più numerosi

Oggi, mentre revisionavo il rapporto amministrativo “Web Crawler User Agents”, ho notato che l’elenco ora si estende su più pagine, anche quando limitato alle ultime 24 ore.

Questo agente sembra essere responsabile di gran parte dell’aumento:

Mozilla/5.0 (compatible; Qwantbot/1.0_3003783; +https://help.qwant.com/bot/)

Tuttavia, la parte numerica del qualificatore sembra cambiare, ad esempio:

1.0_3003783

Se esistesse un modo per consolidare queste varianti, sarebbe utile.

Non segnalo questo come un problema, ma solo per notare che ora richiede più clic per la revisione. :firstworldproblem: