Aiguillon var sønn av Armand Louis de Vignerot du Plessis (1683–1750) og hans hustru Charlotte de Crussol de Florensac (1700–1772). Han var nevø til marskalk Richelieu. Som 17-åring trådte han inn i den franske hær.