Victor-François de Broglie kämpfte unter seinem Vater, François-Marie de Broglie, 1734 in Italien in der Schlacht bei Parma und der Schlacht bei Guastalla, sowie im österreichischen Erbfolgekrieg in Böhmen, Bayern und am Rhein und stieg zum Maréchal de camp auf.