Durante quince años Godoy vivió en el palacio, durante los cuales fue acumulando distintos cargo gubernamentales, como Secretario de Estado o del Despacho (1792), Generalísimo (1801) y Gran Almirante (1807).