Suggestion
Faire en sorte que l’IA identifie les robots d’exploration qui explorent régulièrement le site mais qui ne génèrent pas de visites. Les signaler pour examen par les administrateurs.
De plus, modifier le rapport Consolidated Page View pour détailler davantage les robots d’exploration :
- robots d’exploration qui génèrent des visites
- robots d’exploration ponctuels
- autres
De nombreux robots d’exploration visitent les sites quotidiennement ou de manière répétée et, pour des sites tels que SWI-Prolog, beaucoup augmentent les vues de pages, mais il n’y a ensuite aucun avantage pour le site. Le plus souvent, il s’agit de moteurs de recherche, mais si le moteur de recherche ne génère pas de visites, il ne devrait pas être autorisé à explorer le site.
Oui, je sais qu’il n’y a pas de moyen idéal d’arrêter un robot d’exploration malveillant, mais réduire le nombre de vues de pages inutiles de ces robots d’exploration peut représenter de l’argent et du temps réels à long terme.