Googleのインデックス登録問題(robots.txt)」}

Googleから私のフォーラムに関するこの問題について通知を受けました。修正についてご意見をお聞かせください。

また、Discourseにはサイトマップがありません。サイトマッププラグインを見つけましたが、質問があります。サイトマップは常に更新されるのでしょうか?それとも、サイトマップを「更新」するためにプラグインを頻繁に再初期化する必要があるのでしょうか?

参照フォーラム

この問題の影響を受けるページ/URL は何個ありますか?

7

2020 年 4 月 10 日

https://voskcointalk.com/u/greer

2020 年 4 月 10 日

2020 年 4 月 10 日

2020 年 4 月 10 日

2020 年 4 月 10 日

2020 年 4 月 9 日

2020 年 4 月 9 日

はい、デフォルトで robots.txt には /u/ ページの除外が含まれています。ユーザープロフィールをインデックスしないことで、何か見落としているとお考えですか?

もしそうであれば、以下のURLで robots.txt ファイルを上書きできます。

https://voskcointalk.com/admin/customize/robots

デフォルトで除外されている理由はあるのでしょうか?例えば、フォーラムで特定のユーザーを Google で簡単に検索したい場合、どうすればよいのでしょうか?

greer voskcointalk のプロフィールがインデックスされていない場合、Google が彼のスレッドに直接リンクし、ユーザーがそこから直接移動する以外に方法はなくなるのでしょうか?

プロフィールページのクローラー表示には、自己紹介文以外にコンテンツが表示されません。スパマーは自己紹介文に無意味な内容を埋め込むことが大好きです。スパムがサイトに関連付けられるのを防ぐため、クローリングをブロックする方が全体的に望ましいです。

Discourse にはサイトマップがありません。サイトマッププラグインを見つけましたが、私の質問はこれです——サイトマップは自動的に更新され続けるのでしょうか、それとも「更新」するためにプラグインを頻繁に再初期化する必要があるのでしょうか?

この情報に詳しいですか?上記の返信ありがとうございます。

自動的に更新されます。

WAFによるブロックを回避: (http.request.uri.path eq "/basic-info.json" and http.request.uri.path eq "/posts(/[0-9]+)?") すべて無視。