ユーザープロフィールのインデックス作成

サポート
1

皆さん、新年おめでとうございます :))

私の知る限り、ユーザーはGoogleやその他の検索結果にインデックスされないように作られています。しかし、admin/customize/robotsから/uを削除しました。これで十分でしょうか、それとも他に何か変更すべきことはありますか？また、もし誰か興味があるなら、私のコミュニティのユーザープロフィールを検索エンジンにインデックスさせたいと思っています。

2

私も同じ質問があります

3

写真にあるオプションを見つけました

image
image2198×764 66.2 KB

そしてrobots.txtを編集しました

# 攻撃的なサードパーティクローラーをブロックする

User-agent: mauibot
Disallow: /

User-agent: semrushbot
Disallow: /

User-agent: ahrefsbot
Disallow: /

User-agent: blexbot
Disallow: /

User-agent: seo spider
Disallow: /

# すべてのクローラーの一般的なルール

User-agent: *
Disallow: /admin/
Disallow: /auth/
Disallow: /email/
Disallow: /session
Disallow: /user-api-key
Disallow: /badges
Disallow: /my
Disallow: /search
Disallow: /g

# 低価値のページをブロックする

Disallow: /u/          # ユーザープロフィール
Disallow: /tag/        # タグインデックス
Disallow: /*.json      # JSON APIレスポンス

# フィードをブロックする（インデックスには役立たない）

Disallow: /t/*/*.rss
Disallow: /c/*.rss

# Googlebotを許可する（上記と同じルール）

User-agent: Googlebot
Disallow: /admin/
Disallow: /auth/
Disallow: /email/
Disallow: /session
Disallow: /user-api-key
Disallow: /badges
Disallow: /my
Disallow: /search
Disallow: /g
Disallow: /u/
Disallow: /tag/
Disallow: /*.json
Disallow: /t/*/*.rss
Disallow: /c/*.rss

# サイトマップを指定する

Sitemap: https://site.com/sitemap.xml