Вернулся во Францию 25 октября 1795 года, где был арестован и заключён в тюрьму, но спасён друзьями. После переворота 1797 года укрылся в Оверни, где купил замок, однако вскоре был обнаружен и арестован, но во время этапирования в Лион бежал и укрылся в Швейцарии. В Париж вернулся уже при Наполеоне, не подвергался преследованиям и отказался от политической деятельности. После Реставрации Бурбонов в знак признания его прошлых заслуг был назначен маршалом и кавалером ордена святого Людовика (был лишён его в период «Ста дней» Наполеона). Бац умер в своём замке Шадьё, на берегу Аллье.