Quando analizziamo il conteggio delle visualizzazioni di pagina del nostro crawler, sembra esserci una voce non identificata che ha generato oltre 500.000 visualizzazioni di pagina in un mese:
Siamo un progetto FLOSS self-hosted, quindi immagino che questa opzione sia da escludere
So che potrei aggiungere ulteriori filtri e chiedere al nostro responsabile infrastruttura di analizzare più log — mi chiedevo solo se qualcun altro avesse già visto questo problema prima.
I controlli di salute dovrebbero impostare un User Agent corretto, così che questo non accada di nuovo. Inoltre, puoi utilizzare la route /srv/status per i controlli di salute.