User-agent: lfc-discourse-public-crawler

Contribuir Bug
1

Boa tarde,

Isso não é exatamente um bug, mas sim uma tentativa de obter mais informações sobre o que parece ser um rastreador de IA agressivo.

No meu painel de análise do Cloudflare, vejo 60% das requisições HTTP vindas de um user-agent com “Discourse” no nome, notadamente: lfc-discourse-public-crawler. O user-agent completo é lfc-discourse-public-crawler/0.1 (+public Discourse API archival crawl). Nunca vi esse user-agent antes.

Informações adicionais:

  • Acessa apenas a versão .json de um tópico.
  • Parece estar operando a partir de Singapura.
  • O IP aponta para speedypage.com.
  • Navegador: desconhecido/outros.
  • SO: desconhecido/outros.

E não parece estar afiliado ao Discourse. Mas com um nome assim, talvez seja bom que vocês também estejam cientes disso.

3 curtidas
2

Hmm, pode ser qualquer coisa, mas talvez seja um fork de A basic Discourse archival tool?

1 curtida