Pero la enemiga de Napoleón, a quien no le hacía ni caso la bella y virtuosa Juliette, hacia su marido, desemboca en el hundimiento de varias casas de Banca socias de Jacques operando en España y hace que deba vender el palacete de la Rue Mont Blanc con sólo 29 años de edad, (1806).