追加でやるべきことは特にないはずです…そのクローラーのトラフィックは、おそらく community.yoursite.com/login にアクセスしているクローラーによるものです。community.example.com/admin/reports/web_crawlers を確認すると、特定のクローラーがサイトをどのくらいの頻度でアクセスしているかを確認できます。
クローラーのトラフィックを減らすためにできることがいくつかあります。
-
robots.txt で
/loginのクローラーアクセスを禁止してみてください(community.example.com/admin/customize/robots)。これによりクローラーのトラフィックが多少減少するでしょう(ただし、robots.txt を無視するクローラーも存在するため、完全に消えるわけではありません)。 -
/admin/reports/web_crawlersで最も問題となっているクローラーを確認し、その User-Agent を「ブロックするクローラーの User-Agent」サイトの設定に追加してください。