Han giftet seg to ganger. Med sin første kone, Ansgarde av Burgund, fikk han sønnene Ludvig (født i 863) og Carloman (født i 866), som begge ble konger av Frankrike, og døtrene Hildegarde (født i 864), og Gisela (865-884), som giftet seg med Robert, greven av Troyes.