En 1850 encargó al arquitecto Sir Joseph Paxton, diseñador del Crystal Palace, el trabajo de construir para el castillo diferentes ampliaciones.