En 1818 el palacio se convirtió en residencia del Virrey del Reino de Polonia (cuando recibió el nombre "Pałac Namiestnikowski", Palacio del Namestnik o Virrey). El primer Virrey fue Józef Zajączek (1752–1820) , desde 1815, antiguo ayudante del "hetman" Franciszek Ksawery Branicki, diputado del Gran Sejm, secretario de los Amigos de la Constitución (de la Constitución del 3 de mayo), comandante de división durante la Guerra Ruso-Polaca de 1792, héroe de la Batalla de Zieleńce, jacobino polaco, soldado en las legiones de Jan Henryk Dąbrowski y general de Napoleón. Posteriormente adoptó una actitud servil hacia Alejandro I, Rey de Polonia y Zar de Rusia, quien le hizo duque en 1818. Zajączek había perdido una pierna en el Río Berézina y era llevado a todas partes por sus ayudantes en un sillón.