I 1816 ble han gift med Maria Carolina av De begge Sicilier. De fikk fire barn, hvorav to døde tidlig og to levde til voksen alder. De som levde til voksen alder var Louise Marie Thérèse (1819–1864) og Henri, hertug av Bordeaux (1820–1883).