تعريف الزحف
الزحف: هي عملية فهرسة البيانات على صفحات الويب باستخدام برنامج آلي أو روبوت، تعرف هذه البرامج بأسماء متعددة، كزواحف الويب والعنكبوتات، تزحف إلى محتوى مواقع الويب وتقرأها من خلال تتبع روابط الموقع.
يخزن المحتوى الذي تعثر عليه برامج الزحف هذه وينظم في قاعدة بيانات تسمى فهرس محرك البحث.