La Torre Blanca, que da nombre a todo el castillo, fue construida por Guillermo el Conquistador, duque de Normandía, en 1078.