Bei den Wahlen von 1837 verlor Stuart sein Mandat für Arundel an Henry Granville Fitzalan-Howard. Damit konnte er die polnische Sache nur noch indirekt im House of Commons vertreten, so dass er sein Anliegen stattdessen durch Versammlungen sowie durch Publikationen und die Presse vorbringen musste. Seine Ehe scheiterte 1840, als seine Frau ihn verließ und nach Rom zog, wo sie 1847 starb. In diesem Jahr wurde Stuart als Abgeordneter für Marylebone erneut in das House of Commons gewählt, 1852 erfolgte seine Wiederwahl. Nachdem sich seine Hoffnungen, durch die Revolutionen von 1848 würde Polen seine Unabhängigkeit wieder gewinnen können, zerschlagen hatten, wurde er zu einem Unterstützer des ungarischen Freiheitskampfes. Nachdem Österreich mit Hilfe von Russland Ungarn zurückgewonnen hatte, setzte sich Stuart für die mehreren Tausend ungarischen Flüchtlinge aus, die in Gebiete des Osmanischen Reichs geflüchtet waren und deren Auslieferung von Österreich und Russland gefordert wurde.