About 1/3 of our traffic is from crawlers (about 250K last month). Is there a way to block these but allow Google’s crawlers?
これはサイト設定から可能になりました。「crawler」で検索し、特にblocked crawler user agentsを確認してください。特定のクローラーのみを許可し、他をすべて厳格に拒否したい場合は、allowed crawler user agentsも利用できます。
「いいね!」 12