Marie Antoinette avskjediget d'Arpajon etter at hun ble dronning i år 1774, og d'Arpajon ble da medlem av den høyadelige opposisjonen mot dronningen som hadde samlinger hos hos kongens fastre.