Web-Crawler werden Spider genannt, weil sie durch das Web kriechen und Links von einer Seite zur anderen folgen.