Fue edificado entre 1845 y 1851 por la Reina Victoria, y su marido el Príncipe Alberto, como una residencia estival y casa privada.