I 1803 vendte han tilbake til Frankrike etter å blitt strøket fra emigrantlisten av førstekonsul Napoléon Bonaparte, giftet seg med son nevøs enke Madame de Roquefeuil, og levde ubemerket til sin død.