El castillo fue seriamente dañado por el conde de Hertford, quien lo incendió en 1544 durante la guerra del Rough Wooing.