Crawl er en teknik, der bruges af søgemaskiner til at indeksere websteder. Det betyder, at søgemaskinen gennemser websiderne for at indsamle data og oprette en indeks over indhold, der er tilgængeligt for søgemaskinen.