Gated Topics 的工作原理是什么，关于机器人进行抓取以进行索引？

[Andrew_Bond]

关于机器人进行抓取以进行索引，这如何运作？\n\n我说得对吗，因为这只是 CSS，机器人仍然可以索引后面的信息？

[Jagster (Jakke Lehtonen)]

这些机器人根本不应该被索引。如果机器人可以这样做，那将是一个非常糟糕的设计缺陷，很容易适得其反。

搜索结果不是免费广告。搜索结果是为了从网络内容中查找信息。如果谷歌发现有仅供机器人访问且旨在绕过免费内容的免费内容，它们将迅速严厉惩罚。

好消息是 Discourse 不会这样做。如果可见性不是所有人，那么内容对机器人也是禁止的。