제안해 주셔서 감사합니다!
- /admin/reports/web_crawlers를 확인해 보니 Googlebot이 목록에 포함되어 있어 포럼을 크롤링하고 있음을 확인했습니다.
- allowed_crawler_user_agents 목록이 비어 있었으므로, 다음과 같이 추가했습니다:
Googlebot
bingbot
DuckDuckBot
또한 Google Search Console에서 사이트맵을 다시 제출했으며, 향후 며칠간 색인 처리가 개선되는지 모니터링할 예정입니다.