En søkerobot burde inkludere følgende policies: En utvalgspolicy som velger hvilke sider som skal lastes ned En gjenbesøkspolicy som velger når og hvilke sider som skal sjekkes for endringer En høflighetspolicy som passer på at servere ikke overbelastes En parallellpolicy som koordinerer flere søkeroboter.