El primer motor de búsqueda bien documentado que buscó archivos de contenido, a saber, archivos FTP, fue Archie , que debutó el 10 de septiembre de 1990. Antes de septiembre de 1993, la World Wide Web estaba indexada completamente a mano. Había una lista de servidores web editada por Tim Berners-Lee y alojada en el servidor web del CERN.