Ketika Kekaisaran Pertama jatuh, dia mendukung Pemulihan dan menghancurkan lukisannya tentang Napoleon. Tahun berikutnya, ia menikahi putri sepupunya yang berusia delapan belas tahun dan pindah ke Provence pada tahun 1818. Ia kembali ke Lyon pada tahun 1823 dan menjabat sebagai Direktur cole hingga tahun 1830. Beberapa muridnya yang paling terkenal ada Claude Bonnefond, Hippolyte Flandrin dan Victor Orsel. Pada tahun 1828, ia menyumbangkan koleksinya ke Louvre dan baru saja selesai memindahkannya ke Paris ketika Revolusi Juli pecah. Ini mengakhiri karirnya dan dia pergi ke Provence lagi, tidak pernah kembali ke Lyon. Bertahun-tahun kemudian, sendirian dan tanpa uang sepeser pun, dia pindah ke sebuah loteng di Rue de Seine di Paris, di mana dia meninggal.