您好，我的整个网站都是由 Discourse 构建的论坛。我搜索了我的网站域名，Google 和 Bing 都无法显示我的网站域名。AI 说可能是 Discourse 安全设置中的爬虫设置阻止了 Google 搜索。这是正确的吗？以及如何让 Google 搜索访问我的网站？
谢谢，
Frank
您好，你们最近才推出论坛吗？是否有足够的高质量内容？我记得那是在确保您的网页被搜索引擎索引的关键因素。
2 个赞
是的，我上传网站才几周，但当我用WordPress构建其他网站时，谷歌搜索几乎立刻就会显示域名。难道我真的不需要更改一些设置来让谷歌搜索找到我的网站吗？
您是否更改了“whitelisted crawler user agents”（白名单爬虫用户代理）或“blacklisted crawler user agents”（黑名单爬虫用户代理）？
您可能还想查看：
https://meta.discourse.org/t/why-isnt-google-indexing-discourse-seo-concerns/218098
里面有很多有用的信息。
3 个赞
@Frankz 你能弄明白这个问题吗？你的网站现在能在互联网搜索中显示了吗？我认为 Nate 的建议是正确的。搜索引擎需要一段时间才能注意到一个新网站。请检查你的设置！
如果这是一个由我们托管的网站，请联系 team@discourse.org，我们的支持团队可以帮助你验证设置是否正确。默认设置通常没有问题。
可能还值得再次检查“允许在 robots.txt 中建立索引”是否仍然启用。
2 个赞
我的网站托管在 Discourse 论坛上。允许在 robot.txt 中建立索引的设置在哪里？
您好，Frankz！请访问您的网站，然后进入“管理”，接着在侧边栏选择“所有站点设置”，然后搜索“允许索引”（allow index）。您届时会看到该设置。它是否已按应有的方式选中？
完成此操作后，如果您仍然遇到问题，请写信至 team@discourse.org。我们的支持团队将很乐意为您提供帮助。
我尝试在我的域名之前加上 www.，然后我的网站就可以在谷歌搜索结果中显示了。谢谢，弗兰克
1 个赞
太棒了！您的论坛的域名也包含一些常用词，所以当您单独输入它时，谷歌没有识别出来我并不感到惊讶。您也可以在前面加上 https:// 以确保谷歌将其识别为网站 URL。我还搜索了一些主题标题，发现您的论坛确实出现在搜索结果的顶部，所以我想您在这里情况良好。
1 个赞
使用以下方式搜索：site:hostname，例如 site:meta.discourse.org
这将向您显示它们为您的网站收录了哪些内容。
2 个赞