User-agent : lfc-discourse-public-crawler

Contribuer Bug
1

Bonjour,

Ce n’est pas vraiment un bug, mais plutôt une tentative de rassembler plus d’informations sur ce qui semble être un scraper IA agressif.

Dans mon tableau de bord d’analyse Cloudflare, je vois que 60 % des requêtes HTTP proviennent d’un user-agent contenant « Discourse » dans son nom, notamment : lfc-discourse-public-crawler. Le user-agent complet est lfc-discourse-public-crawler/0.1 (+public Discourse API archival crawl). Je n’ai jamais vu ce user-agent auparavant.

Informations supplémentaires :

  • N’accède qu’à la version .json d’un sujet.
  • Il semble fonctionner depuis Singapour.
  • L’adresse IP renvoie vers speedypage.com.
  • Navigateur : inconnu/autres.
  • OS : inconnu/autres.

Et il ne semble pas être affilié à Discourse. Mais avec un nom comme celui-là, il est peut-être bon que vous en soyez également informé.

3 « J'aime »
2

Hmm, ça pourrait être n’importe quoi, mais peut-être une fourche de A basic Discourse archival tool?

1 « J'aime »