Al sinds de 17de eeuw stond op de plek van het Belvedère het paleis van de Litouwse grootkanselier graaf Krzystof Pac. Door het mooie uitzicht kreeg het paleis de naam Belvedère. In de eerste helft van de 18de eeuw werd het paleis verbouwd in een barokke stijl door de familie Lubomirski. De laatste Poolse koning Stanisław August Poniatowski kocht het in 1767 en gebruikte het porseleinfabriek. Van 1818 tot 1830 was het de residentie van de Russische Groothertog Constantijn., hij vluchtte na de Opstand van november 1830. Hij liet het nog in 1822 door Kubickie in classicistische stijl verbouwen.