Cuando Philibert Orry perdió el favor del rey, éste nombró a Abel-François, que tenía 18 años, subdirector de la dirección general de los "Edificios, Artes, Jardines y Manufacturas", mientras que Carlos Francisco Paul Le Normant de Tournehem, padre biológico de la marquesa de Pompadour, fue designado como sucesor de Orry.