تحديث: 08/13/2022
زار الروبوت موقعنا مرة أخرى في 08/04/2022 (موقع الزاحف)
تقرير: مشاهدات الصفحة المجمعة
تقرير: وكلاء مستخدمي زاحف الويب
تقرير: أهم مصدر حركة المرور
من الواضح أن السماح لروبوت MegaIndex.ru/2.0 بفهرسة الموقع لا يبدو أنه يولد حركة مرور إلى الموقع.
ملاحظة: على حد علمي، يختلف yandex.ru عن Megaindex.ru.
لحظر الزواحف، يوجد robots.txt والذي تمت ملاحظته
https://<موقع Discourse>/admin/customize/robots
ولكن لن تحترم جميع الزواحف ملف robots.txt. 
