一部のユーザーエージェントを無視できますか?

given that it’s registered as a crawler, try this