# 爬虫能看到什么？

**URL:** <https://meta.discourse.org/t/what-can-crawlers-see/294061>\
**Category:** Data & reporting\
**Created:** [2024年二月3日 19:15 UTC](https://meta.discourse.org/t/what-can-crawlers-see/294061 "2024-02-03T19:15:25Z")\
**Posts on this page:** 1\
**Showing post:** 6

<div class="post-metadata">

**Author:** ![HAWK](https://sea3.discourse-cdn.com/meta/user_avatar/meta.discourse.org/hawk/32/86627_2.png) [@HAWK](https://meta.discourse.org/u/HAWK)\
**Post date:** [2024年二月4日 02:41 UTC](https://meta.discourse.org/t/what-can-crawlers-see/294061/6 "2024-02-04T02:41:10Z")

</div>

[控制网站的网络爬虫](https://meta.discourse.org/t/controlling-web-crawlers-for-a-site/244925)

---

_[View the full topic](https://meta.discourse.org/t/what-can-crawlers-see/294061)._