Kai-Uwe von Hassel var gift to ganger og hadde en sønn og en datter. Sønnen, Joachim von Hassel, omkom i 1970 da jagerflyet hans styrtet.