یک موتور جستجوی اینترنتی با دانلود صفحات وب و دنبال کردن پیوندهای موجود در صفحات در وب حرکت می کند تا صفحات جدیدی را در دسترس کاربران قرار دهد.