Su madre murió en 1762, y cuando su padre murió en 1772, Joseph heredó la casa, los telares y el taller de su padre, así como un viñedo y una cantera en Couzon-au-Mont d'Or.