આ મૂળભૂત રીતે સૉફ્ટવેર પ્રોગ્રામ્સ છે જે શોધ એન્જિન ડેટાબેસેસ માટે વેબ અને ઇન્ડેક્સ સાઇટ માહિતીને ક્રોલ કરે છે.