La primera alteración significante hecha al edificio fue una gran galería agregada por Sir James Pennethorne en 1860–1.