# Crawler web

**URL:** <https://meta.discourse.org/t/web-crawlers/271767>\
**Category:** Data & reporting\
**Created:** [16 Luglio 2023, 6:41am UTC](https://meta.discourse.org/t/web-crawlers/271767 "2023-07-16T06:41:00Z")\
**Posts on this page:** 1\
**Showing post:** 1

<div class="post-metadata">

**Author:** ![anon65426961](https://avatars.discourse-cdn.com/v4/letter/a/34f0e0/32.png) [@anon65426961](https://meta.discourse.org/u/anon65426961)\
**Post date:** [16 Luglio 2023, 6:41am UTC](https://meta.discourse.org/t/web-crawlers/271767/1 "2023-07-16T06:41:00Z")

</div>

Ho sentito su un altro thread @simon menzionare che esiste un’impostazione per fermare/distruggere i crawler, non riesco a trovare questa impostazione, come si fa, qualcuno sa dov’è e come funziona?

Ho avuto un insolito picco di 48 crawler sul mio sito il 14 luglio, non mi piacciono questi piccoli bastardi, cosa stanno facendo?

 ![graph](https://global.discourse-cdn.com/meta/original/4X/6/f/9/6f9d72df186cb2a7e34e1af8d96e134af0f49ed9.png)

---

_[View the full topic](https://meta.discourse.org/t/web-crawlers/271767)._