ظهور حركة مستخدمين مجهولين وبرامج زحف، رغم خصوصية الموقع

لا ينبغي أن يكون هناك أي شيء إضافي تحتاج إلى فعله… حركة مرور الزحف هذه على الأرجح من برامج الزحف التي تستهدف community.yoursite.com/login. إذا قمت بفحص community.example.com/admin/reports/web_crawlers، يمكنك معرفة مدى تكرار زحف برامج زحف محددة لموقعك.

هناك بضع خطوات يمكنك اتخاذها لتقليل حركة مرور الزحف…

  • حاول منع الوصول إلى /login من برامج الزحف في ملف robots.txt (community.example.com/admin/customize/robots)… من المرجح أن تنخفض حركة مرور الزحف (رغم أنها قد لا تختفي تمامًا لأن هناك برامج زحف لا تمتثل لملف robots.txt)

  • راجع الأسوأ أداءً من /admin/reports/web_crawlers وأضف عناوين المستخدم (user-agents) الخاصة بهم إلى إعداد الموقع “عناوين المستخدم المحظورة للزواحف” (blocked crawler user agents)