Le visualizzazioni di pagina dei web crawler sono incluse nel limite mensile di 500.000 visualizzazioni di pagina per il piano gratuito?
In qualità di amministratore di un forum Discourse, ho notato che i web crawler rappresentano più del 95% delle nostre visualizzazioni di pagina totali. Ciononostante, rimaniamo al di sotto delle 500.000 visualizzazioni di pagina al mese. Detto questo, il traffico dei crawler e le visualizzazioni di pagina complessive hanno mostrato una tendenza costante al rialzo negli ultimi anni.
Dato questo, comprendere come monitorare e gestire l’attività dei crawler è sempre più importante, in particolare per gli amministratori che sono nuovi nella gestione di un’istanza Discourse.
Potrebbe essere utile che la documentazione iniziale di configurazione del sito includa indicazioni chiare su:
- Come vengono conteggiate le visualizzazioni di pagina (incluso se il traffico dei crawler è incluso)
- Come monitorare l’attività dei crawler
- Metodi per gestire o limitare il traffico dei crawler, ove opportuno
