MihirR
(Mihir)
1 يناير 2025، 9:29م
1
مرحباً بالجميع، سنة جديدة سعيدة :))
على حد علمي، تم إنشاء المستخدمين بحيث لا تتم فهرستهم على جوجل أو أي نتائج بحث. ومع ذلك، لقد قمت بإزالة /u من admin/customize/robots، فهل هذا كافٍ أم أن هناك المزيد من التغييرات التي يجب القيام بها، وأيضًا إذا كان أي شخص فضوليًا بشأن ما أحاول القيام به، فهو أنني أحب أن تتم فهرسة ملفات تعريف مستخدمي مجتمعي على محركات البحث.
اكتشفت الخيار كما في الصورة
ثم قمت بتعديل ملف robots.txt
# منع الزواحف الخارجية العدوانية
User-agent: mauibot
Disallow: /
User-agent: semrushbot
Disallow: /
User-agent: ahrefsbot
Disallow: /
User-agent: blexbot
Disallow: /
User-agent: seo spider
Disallow: /
# قواعد عامة لجميع الزواحف
User-agent: *
Disallow: /admin/
Disallow: /auth/
Disallow: /email/
Disallow: /session
Disallow: /user-api-key
Disallow: /badges
Disallow: /my
Disallow: /search
Disallow: /g
# منع الصفحات ذات القيمة المنخفضة
Disallow: /u/ # ملفات تعريف المستخدمين
Disallow: /tag/ # فهارس العلامات
Disallow: /*.json # استجابات واجهة برمجة التطبيقات JSON
# منع خلاصات الأخبار (غير مفيدة للفهرسة)
Disallow: /t/*/*.rss
Disallow: /c/*.rss
# السماح لـ Googlebot (نفس القواعد المذكورة أعلاه)
User-agent: Googlebot
Disallow: /admin/
Disallow: /auth/
Disallow: /email/
Disallow: /session
Disallow: /user-api-key
Disallow: /badges
Disallow: /my
Disallow: /search
Disallow: /g
Disallow: /u/
Disallow: /tag/
Disallow: /*.json
Disallow: /t/*/*.rss
Disallow: /c/*.rss
# الإشارة إلى خريطة الموقع
Sitemap: https://site.com/sitemap.xml