A la edad de nueve años, su padre fue asesinado en un duelo y su madre lo dejó bajo el cuidado de sus tíos François Buron y Jacques-François Desmaisons, que eran unos prósperos arquitectos.