قراءة هذا الموضوع: Devs say AI crawlers dominate traffic, forcing blocks on entire countries | Hacker News
أتساءل كيف هو الحال بالنسبة للأشخاص الذين يستضيفون خدماتهم بأنفسهم للتعامل مع الزواحف التي تقوم فعليًا بهجمات DDoS بشكل مستمر، خاصة على المثيلات داخل Fediverse.
أعتقد أن الخطوة الأولى الجيدة هي تحديد حجم المشكلة بنفسك باستخدام مقياس “مرات مشاهدة الصفحة الجديدة”:
إذا كنت ترى نسبة 60% من الزيارات غير البشرية، فهذا على الأرجح جيد ولا تحتاج إلى اتخاذ أي إجراء.
إذا كانت 95%.. نعم، قد يكون الوقت قد حان لبدء التحقيق في الحلول.
إعداد وكلاء الزحف المحظورين هو صديق المسؤول. حركة المرور غير المرغوب فيها ليست مشكلة كبيرة مع Discourse لأن الحمل ليس ثقيلاً للغاية. لكنني حظرت عددًا قليلاً من الأسوأ لأنني أكره حقًا نموذج أعمالهم. يصرخ الجميع حول كيف تسرق شركات الذكاء الاصطناعي المحتوى، وهو ما يفعلونه بالفعل، لكن شركات تحسين محركات البحث أسوأ بكثير - وروبوتاتهم جشعة حقًا.
لكنني أستخدم أيضًا الحظر الجغرافي، لأنني أستطيع. هناك ما لا يقل عن نصف دزينة من البلدان التي هي مصادر للمقلدين وغيرهم من الجهات الفاعلة الخبيثة. ولكن إذا كان المنتدى مخصصًا لجمهور عالمي، فهذا غير ممكن بالطبع.
مع مواقع WordPress الخاصة بي، يتم القيام بنفس الشيء باستخدام Nginx بمساعدة Varnish.
في الوقت الحالي، نسبة البشر مقابل الروبوتات هي شيء من حوالي 50/50 في منتداي.
على فكرة، الوسم غير صحيح، على ما أعتقد.
أتفق، علامة الذكاء الاصطناعي لديها أيقونة إضافة، لذلك أفترض أنها مخصصة فقط لإضافة الذكاء الاصطناعي. لقد أزلتها.
يتم تخزين محتوى الزواحف مؤقتًا بشكل كبير، لذا في الواقع لم أرها أبدًا قادرة على شن هجوم DDoS.
هل تواجه بالفعل مشاكل في الأداء بسبب هذا؟