إذًا، أرى هذا
وأتساءل ما هي الزواحف؟
تكون الزواحف (Crawlers) أشياء مثل قيام محرك بحث Google بأتمتة “زحف” موقعك الإلكتروني للحصول على المحتوى حتى يتمكن محرك بحث Google من عرض موقعك عند البحث عنه.
هناك زواحف أخرى بخلاف زواحف Google.
يجب عليك الاطلاع على هذا المنشور (والرابط الموجود فيه) لمزيد من المعلومات: Better pageview metrics with the new site traffic report
لفهم أبسط، الزواحف هي روبوتات تزحف عبر الصفحات عبر الإنترنت وتتبع الروابط لزحف المزيد من الصفحات. تستخدمها محركات البحث في الغالب لبناء الفهرس، وهناك زواحف أخرى عبر الإنترنت مثل آلة الرجوع بالزمن (wayback machine)، إلخ.
معظمها في الواقع شركات تحسين محركات البحث والذكاء الاصطناعي، وليست محركات بحث أو جهات فاعلة مفيدة أخرى. والجزء X من روبوتات البحث هذه هي في الواقع برامج زاحفة تبحث عن نقاط الضعف وتسرق المحتوى.
على منتدياتي ومواقعي على أي حال.
نموذجي، الناس يحاولون دائمًا سرقة أعمال الآخرين.