Después de 1777, el palacio pasó a manos del último rey de Polonia, Stanisław August Poniatowski, quien contrató al arquitecto Domenico Merlini para rediseñar las habitaciones y adosarle el ala de la biblioteca del Castillo Real. El Rey luego regaló el palacio redecorado a su sobrino, el Príncipe Józef Poniatowski. El príncipe fue un comandante exitoso en la Insurrección de Kościuszko en 1794, y más tarde uno de los mariscales de Napoleón Bonaparte. Estando en manos del Príncipe, el Palacio se convirtió en centro de la escena social de clase alta de Varsovia.