L’hôtel est revendu en 1776 en état futur d’achèvement par Benoît de Sainte-Paulle à Jean-François Caron, trésorier de l’ordre du Saint-Esprit, qui fait construire deux ailes sur cour en 1778 par l’architecte Antoine-François Peyre. Jean-François Caron déclaré en faillite frauduleuse en , est incarcéré à la Bastille, et l’hôtel est vendu par adjudication à François-Nicolas Lenormand qui acquiert également la charge de trésorier de l’ordre du Saint-Esprit de Jean-François Caron. François-Nicolas Lenormand fait agrandir l’hôtel en prolongeant les ailes bâties par Antoine-François Peyre. Après sa mort en 1783, sa veuve Marie-Louise O'Murphy continua d’habiter avec sa fille Marguerite-Victoire l’hôtel qui fut ensuite loué à Claude Antoine de Valdec de Lessart, ministre de Louis XVI en 1791, arrêté en 1792 et massacré en septembre.