Après la bataille de Hastings en 1066, Guillaume mena son armée à Canterbury, puis détruisit des villes le long du Chemin des pèlerins, notamment à Guildford. Plus tard, Guillaume, ou l'un de ses barons, aurait construit le château de Guildford. Cependant il n'y a aucune trace de cela dans le Domesday Book, et la construction a donc probablement commencé après 1086.