很高兴知道。这听起来是朝着正确方向迈出的一大步。
就我而言，我们实际上在我们当前的论坛（在其仍公开时）中看到了一些实例，我们将 robots.txt 文件添加到了论坛的某些子文件夹中，而 Google 仍然在抓取它们。我认为这是非常不寻常的……但我们发现，在某些情况下，Google 不会遵循此指令。要 100% 确保页面不被索引，唯一的方法是让页面隐藏在登录屏幕后面，或者让页面根本不存在。
从外部人士的角度来看，告诉 Discourse不要为每个回复执行创建这些附加 URL 的额外操作似乎很简单。这样软件的工作量就会减少，复杂性也会降低，不是吗？
如果能在管理员设置中提供一个功能来完全关闭这些额外的 URL，那就太好了。