コミュニティ内のクローラー

Vidyaranjan さん、こんにちは。

詳細なクローラーレポートについては /admin/reports/web_crawlers を確認してみてください。その後、役に立たないクローラーを blocked crawler user agents サイト設定に追加してブロックできます。この設定では、ユーザーエージェント文字列に含まれる大文字小文字を区別しない単語を指定します。