"عناكب البحث" هي مجرد برامج آلية وظيفتها الزحف نحو صفحات الويب من خلال الروابط herf أو scr ثم فهرستها وأرشفتها، أشهرها روبوت (أو عنكبوت) قوقل المسمى Googlebot، هناك عدة طرق للتحكم بهذه البرامج الآلية، بالنسبة لمدونات البلوجر هناك ثلاث طرق إما بملف robots.txt أو بالعلامات Meta Tags أو من خلال لوحة التحكم وهي الأفضل لأنها أوضح وتستخدم نافذة خيارات رسومية لا مجال لنسيان فاصلة أو نقطة!،
شرح: خيارات التحكم ببرامج الزحف والفهرسة
"عناكب البحث" هي مجرد برامج آلية وظيفتها الزحف نحو صفحات الويب من خلال الروابط herf أو scr ثم فهرستها وأرشفتها، أشهرها روبوت (أو عنكبوت) قوقل المسمى Googlebot، هناك عدة طرق للتحكم بهذه البرامج الآلية، بالنسبة لمدونات البلوجر هناك ثلاث طرق إما بملف robots.txt أو بالعلامات Meta Tags أو من خلال لوحة التحكم وهي الأفضل لأنها أوضح وتستخدم نافذة خيارات رسومية لا مجال لنسيان فاصلة أو نقطة!،
