વેબ-ક્રાઉલર નામના સ્પેશ્યલ સોફ્ટવેર ઇન્ટરનેટ પર ફરીને અમુકતમુક માહિતી એકત્ર કરવાનું કામ કરે છે જે સર્ચ એન્જિન દ્વારા વપરાય છે.