مرحبًا، في منتدانا لدينا عدد كبير جدًا من الزوار الآليين (Crawlers)، حيث يتراوح متوسط العدد بين 81 ألفًا و90 ألفًا! هل قد يتسبب ذلك في أي مشاكل؟ وإذا كان الأمر كذلك، فكيف يمكنني منع الزوار الآليين الضارة من الزحف؟
لقد قمت بإدراج معرفات المستخدم (User Agents) للزوار الآليين المحظورة على النحو التالي:
كما قمت بإبطاء الزوار الآليين التالية معرفات المستخدم الخاصة بها:
شكرًا لك.
يمكنك رؤية الأرقام المفصلة على أساس كل زحف إذا قمت بزيارة
your.site.com/admin/reports/web_crawlers
إذا لاحظت وجود زحف غير عادي يسلك سلوكًا خاطئًا، يمكنك إضافة سلسلة فريدة من وكيل المستخدم الخاص به إلى إعداد blacklisted_crawler_user_agents وسيتم حظره.
شكرًا لك على الرد السريع. لقد وجدت أن أحد الزواحف (crawler) لديه 1,695,285 مشاهدة، هل هذا طبيعي أم لا؟
أيضًا، سؤال آخر: كيف يمكنني إضافة زر الحل في منتداي؟ هل أحتاج إلى تثبيت أي إضافات؟
شكرًا لك.
حسنًا، هذا يعتمد على حجم موقعك ووكيل المستخدم الخاص بتلك الزحافة. لا تريد على سبيل المثال حظر Googlebot.
تفقد هذا الرابط
ما هي الروبوتات التي لا ينبغي حظرها؟ وهل توجد طريقة لمعرفة أسماء الروبوتات من لوحات عرض المشاهدات المدمجة؟
يجب عليك حظر الروبوتات التي تسبب مشاكل فقط، والتركيز على عدم حظر أي شيء آخر.
كما ذكرت في منشوري السابق. إذا ذهبت إلى
your.site.com/admin/reports/web_crawlers
ستحصل على قائمة كاملة بجميع الروبوتات الزائرة على موقعك وعدد مرات عرض الصفحة لكل روبوت. هل يمكنك التقاط لقطة شاشة لتلك الصفحة ونشرها هنا؟
