埋め込みトピックからのみクローラーをブロックしますか？

[angus (Angus McLeod)]

@haydenjames様

WP Discourseプラグインでは、Discourseで作成された投稿をrobots.txtファイルに追加する方法はありません。これは純粋にDiscourseの質問、「埋め込みトピックを自動的にnoindexできますか？」（またはそれに類する質問）です。WordPressから埋め込まれたトピックは、他の埋め込まれたトピックと機能的に同じです。調査すべき点は、例えば embed set canonical url というサイト設定の起源や関連する議論などです。

Add option to set canonical_url to embed_url

From time to time we get requests to set the canonical URL of embedded topics to the URL of the blog post. I’ve created a pull request that does exactly that. It unconditionally uses the URL of the original blog post (embed_url) as canonical for the topic. There have been various previous discussions like Google indexed link not pointing to the correct post and Duplicate Content in the past. After reading those posts I’m not so sure about my solution anymore, so I’d like to get some feedback f…

（訂正があれば喜んで受け入れますが）ご希望のことは現在のDiscourseの機能ではないと思います。Discourseは現在、非公開トピックのGETリクエストに X-Robots-Tag: noindex ヘッダーを追加しています。プラグインを介して、埋め込みトピックに対しても同様のことを行うことができます。