El edificio actual fue diseñado como hospital naval en el 1692 por Christopher Wren, incluyendo la capilla y la Sala Pintada (pintada por James Thornhill), y funcionó como tal hasta 1869, cuando el hospital fue clausurado.