I 1787 kom palasset under general Filip Raczyński, som overgav det til sin svigerfar, den storpolske starosta Kazimierz Raczyński. Fra 1786 ble palasset ombygd i klassisistisk stil etter tegninger av Johann Christian Kammsetzer. Det mest fremtredende rommet var ballsalen som spente seg over to etasjer. Etter at Kazimierz Raczyński flyktet fra Warszawa i 1794 ble palasset setet til Det høyeste statsråd. Senere huset det kvarterene til franske offiserer (blant annet Louis Nicolas Davout, Joachim Murat). I 1827 ble palasset solgt til staten, og ble da sete for Rettferdighetens statskommisjon. I mellomkrigstiden virket Rettferdighetsdepartementet i palasset.