I 1818 ble det kjøpt av Kongress-Polens regjering som setet til namiestniken, og ble da også grundig ombygd i klassisistisk stil etter tegninger av Chrystian Piotr Aigner. Under Polens delinger hadde palasset forskjellige funksjoner. I 1821 ble to steinløver plassert foran palasset fra gatesiden, et verk av Camillo Laudini.