I 1724 flyttet det kongelige hoffet inn i palasset. Etter August IIIs død i 1763 mistet palasset sin status som kongelig residens. I årene 1808–1816 tilhørte bygningen fremdeles Sachsens konger, men ble så raskt solgt til Kongress-Polens regjering. En del av rommene ble overgitt til Warszawa-lyceet, hvor blant annet Frédéric Chopin fikk sin grunnutdanning i årene 1823–1826.