સ્પાઈડર, જેને 'વેબ ક્રોલર્સ' તરીકે ઓળખાવાય છે, વેબ શોધે છે અને બધા તેમના ઉદ્દેશ્યમાં મૈત્રીપૂર્ણ નથી.