Tras la invasión normanda de Inglaterra, Guillermo el Conquistador cedió la isla de Wight a su amigo William FitzOsbern, el cual encargó la construcción de una fortificación en madera en Carisbrooke.