Zijn politieke carrière, al eerder ondermijnd door de vruchteloze onderhandelingen over een huwelijk tussen zijn dochter Elisa en prins Wilhelm van Pruisen, kwam tot een einde in de Novemberopstand van 1830-1831. Hij verloor - mede door de rol die zijn broer Michał Gedeon in de opstand speelde - in 1831 zijn stadhouderspost en werd in 1833 uit de overheidsdienst ontslagen. Hij stierf nog datzelfde jaar.