I 1864 ble han gift med sin kusine Marie Isabelle av Orléans. De fikk åtte barn.