在Glean AI中对话语社区内容进行索引

如果你将他们的用户代理设置为被识别为爬虫机器人,Discourse 将渲染一个基本的 HTML 视图,这更容易被索引。

或者,将他们的用户代理添加到隐藏的站点设置 crawler_user_agents 中。

4 个赞