Den 7. mai 1640 giftet han seg med prinsesse Julia Felicitas von Württemberg-Weiltingen (1619–1661), datter av hertug Julius Friedrich (Württemberg-Weiltingen) (1588–1635). De fikk sammen fire barn, men ekteskapet var ulykkelig og biskopen søkte omsider skilsmisse, for å gifte seg til venstre hånd med kammerpiken Christine Clüvers.