Charles Howard, 11º Duque de Norfolk fue conocido por la restauración y mejoras que realizó en el castillo, empezando en 1787 y durante unos cuantos años, como deseo de vivir en él y entretener a sus visitantes.