Entschuldigung, dass ich das Thema wieder aufgreife, aber ich habe noch nicht ganz gefunden, wonach ich suche. Zum einen bieten die Crawler-Statistiken auf der Berichtseite mir Informationen zur Anzahl der Crawler-Seitenaufrufe und deren User-Agents, aber kaum weitere Hinweise, was ich mit diesen Informationen anfangen soll. Crawler sind für mich generell kein Problem, doch Spitzen im Crawler-Zugriff machen die Dashboard-Statistiken fast unbrauchbar.
Sie sehen, eine einzige Spitze am 16. Dezember führt zu einer derartigen Komprimierung aller Diagramme, dass sie kaum noch lesbar sind. Außerdem: Welchen Wert hat diese Information überhaupt? Keinen. Das war der Tag des Google-Ausfalls letzte Woche; wahrscheinlich haben alle Crawler ihre Aktivität verstärkt, sobald Google wieder online war. Großartiges.
Meine Frage lautet also: Kann ich Crawler aus den Statistiken des Haupt-Administratordashboards entfernen?