ربما تكون روبوتات، وربما تكون روبوتات مسح بالذكاء الاصطناعي.
ما ساعدني بشكل كبير هو تقارير زاحف الويب في لوحة التحكم بعد أن تم إخباري بوجودها (لم ألاحظها من قبل) باستخدام هذا حظرت زواحف مختلفة. مما أدى إلى انخفاض المشاهدات المجهولة. أعتقد أن الزواحف تأتي أيضًا من المشاهدات المجهولة. ليس لدي فكرة عن كيفية حدوث ذلك.
تمنحك التقارير أيضًا أسماء الزواحف (وكلاء المستخدم) للبحث عنها في كل زاحف لمعرفة ما إذا كانت ذات قيمة.
قد يكون هذا الموضوع مفيدًا أيضًا