Desde 1846, el único inquilino del palacio fue el ministerio de Marina, junto con el Museo Naval a partir de 1853.