I juni 1795 udråbte hans onkel, "greven af Provence", sig selv til Kong Ludvig 18. Senere samme år ledte den 20-årige Ludvig Anton et mislykket royalistisk oprør i Vendée. I begyndelsen af 1797 sluttede han sig til sin bror og onkel i det tyske Hertugdømme Braunschweig i håb om at blive medlem af den østrigske hær. Østrigs nederlag til Frankrig tvang dem på flugt, og de søgte tilflugt i Mittau, Kurland, under Kejser Paul 1. af Ruslandsbeskyttelse.