User-Agent: lfc-discourse-public-crawler

Guten Tag,

Dies ist weniger ein Fehler, als vielmehr ein Versuch, mehr Informationen über etwas zu ermitteln, das wie ein aggressiver KI-Scraper aussieht.

In meinem Cloudflare-Analytik-Dashboard sehe ich, dass 60 % der HTTP-Anfragen von einem User-Agent stammen, der „Discourse“ im Namen trägt, insbesondere: lfc-discourse-public-crawler. Der vollständige User-Agent lautet lfc-discourse-public-crawler/0.1 (+public Discourse API archival crawl). Ich habe diesen User-Agent noch nie zuvor gesehen.

Zusätzliche Informationen:

  • Greift nur auf die .json-Version eines Themas zu.
  • Es scheint aus Singapur zu operieren.
  • Die IP-Adresse führt zurück zu speedypage.com.
  • Browser: unbekannt/sonstige.
  • Betriebssystem: unbekannt/sonstige.

Und es scheint nicht mit Discourse verbunden zu sein. Aber mit einem solchen Namen ist es vielleicht gut, dass Sie auch davon wissen.

4 „Gefällt mir“

Hmm, könnte alles Mögliche sein, aber vielleicht ein Fork von A basic Discourse archival tool?

1 „Gefällt mir“