Sa carrière militaire commence comme mousquetaire noir à treize ans. Capitaine de cavalerie dans le régiment de Berry, en 1743, à seize ans, il participe à l’armée de Bavière, à la campagne de Flandre en 1744 et à la bataille de Fontenoy. Le , il échappe de peu à la mort en recevant une balle dans la selle de son cheval. En décembre, à dix-huit ans, il est nommé colonel du régiment de dragons de Vibraye qui prit son nom. Il était présent aux sièges d’Anvers en 1746, de Berg-op-Zoom en 1747 et de Maastricht en 1748.