كيف تعمل محركات البحث: 2- الزحف
تبدأ غالب زواحف محركات البحث في اكتشاف موقع ويب ما عن طريق تنزيل ملف (robots.txt) الخاص بالموقع، والذي يحتوي على قواعد حول الصفحات التي يجب على محركات البحث الزحف إليها أو لا يجب أن تزحف إليها على موقع الويب.
WhatsApp: +86 18221755073