Du solltest nur Bots blockieren, die sich Fehlverhalten zuschulden kommen lassen, und alles andere unblockiert lassen.
Wie ich in meinem vorherigen Beitrag bereits erwähnt habe: Wenn du zu
diese.deine.seite.de/admin/reports/web_crawlers
gehst, erhältst du eine vollständige Liste aller Crawler auf deiner Seite sowie die Anzahl der Seitenaufrufe pro Crawler. Könntest du einen Screenshot dieser Seite machen und hier posten?