إضافة مسار CloudFlare إلى robots.txt لتجنب الفحص غير الصحيح من قبل الزواحف

أولاً، أود أن أوضح أن بعض المواقع تعتمد على CloudFlare فوق Discourse لإضافة طبقة إضافية من الأمان. توفر هذه الطبقة بعض الميزات مثل إخفاء البريد الإلكتروني، وتحديات مكافحة الروبوتات، والتي تستخدم مسارًا افتراضيًا مثل:

في وثائق CloudFlare، يوصى بمنع هذا المسار الافتراضي /cdn-cgi/ لتجنب قيام الزواحف ومحركات البحث بفحص هذا المسار.

الغرض الرئيسي من هذا الموضوع هو أنني أرغب في المساهمة في تطوير Discourse، وإضافة طلب سحب جديد، ولكن يجب أولاً أن أسأل عما إذا كانت هذه ميزة مناسبة في Discourse.

شكراً جزيلاً

غالبًا ما تؤدي تحسينات السرعة في Cloudflare إلى تعطل Discourse. لا أعتقد أن أيًا من هذه الأشياء مهم.