ملف Robots.txt لحظر فهرسة الموقع الخاص بالكامل

مرحباً. لقد راجعت النقاش في:

لكنني لم أجد إجابة واضحة وحاسمة على هذا السؤال. كيف يمكنني تمكين ملف robots.txt لموقع Discourse للإشارة إلى أنه لا يجب فهرسته بواسطة أي زوار؟ يتعلق الأمر بموقع خاص، ولا يوجد سبب لوجود أي حضور له في محركات البحث. شكراً!

انظر إلى الرد قبل الأخير في هذا الموضوع: Needing to edit robots.txt file - where is it? - #42 by Osama.

آه، فوّتُ ذلك هناك. مثالي. عمل بسحر. شكراً لك!

أيضًا، تأكد من تفعيل إعداد “تسجيل الدخول مطلوب” عن طريق إعادة تشغيل المعالج في discourse.yoursite.com/wizard. سيؤدي ذلك أيضًا إلى منع محركات البحث من الوصول.

لطالما تطلّب الموقع تسجيل الدخول، ولا يسمح بالتسجيل الذاتي للمستخدمين. ومع ذلك، فقد ظلّ يظهر في محركات البحث، لكن دون فهرسة أي محتوى نظرًا لأنه لم يتمكن من تسجيل الدخول. أملي هو أنه بمجرد منع الموقع صراحةً عبر ملف robots.txt، ستتوقف أي إشارات إليه. شكرًا لك.