انتقلت للتو من الوضع الخاص إلى العام، وتم الحظر بواسطة robots.txt

لقد فتحت منتدياتنا للتو ليكتشفها جوجل واستخدمت وحدة تحكم البحث لفهرسة موقعنا. (لست متأكداً مما إذا كان هناك أشياء أخرى يجب أن أفعلها ¯\_(ツ)_/¯ (هل لديك أي اقتراحات؟)

إليك التعليقات التي حصلت عليها من وحدة تحكم بحث جوجل:

هل قمت بفحص ملف robots.txt؟

أنا لست متأكدًا مما يجب أن أبحث عنه في ملف robots.txt أو أين أجده.

لقد تأكدت من تحديد هذه المربع في إعدادات المسؤول…

لا أعرف ما إذا كان هذا يُحدث فرقًا في سياق سؤالي، لكن هناك ملاحظة أخرى: أنا أستخدم الدخول الموحد (SSO) وأستخدم ووردبريس كمزود. هل يُحدث ذلك فرقًا هنا؟

موقعي: pickleballist.com
منتداي: forums.pickleballist.com

يوجد ملف robots.txt الخاص بك في الجذر (root) لكل موقع، لذا:

https://pickleballist.com/robots.txt
https://forums.pickleballist.com/robots.txt

لا يوجد أي شيء في هذه الملفات يمنع جوجل، ويمكنك التحقق من ذلك بنفسك باستخدام ماسحات ملفات robots.txt من جهات خارجية، مثل هذه الأداة من Ryte.

وهو ما يؤكد أن ملف robots.txt لا يمنع Googlebot:

كما توفر جوجل أداة اختبار داخل وحدة تحكم البحث.

user-agent: *
Disallow:

احذف الرابط الذي تريد حظره في ملف robots.txt

نظرًا لأن منتداك ظل يتطلب تسجيل الدخول و/أو منع الفهرسة لفترة طويلة، فستستغرق عملية إعادة فحص ملف robots.txt من قبل الزاحف وقتًا طويلاً حتى يكتشف أنه تم إلغاء الحظر. ربما يكون هناك زر لطلب إعادة الفحص في مكان ما، أو يمكنك ببساطة الانتظار.

نعم، أنت محق في أن الأمر كان يتطلب “تسجيل الدخول” منذ شهور عديدة. نأمل أن يتم فهرستنا قريبًا!