Kai-Uwe von Hassels bestefar, generalløytnant Friedrich von Hassel (1833–1890), ble den 22. mars 1887 elevert til den prøyssiske adelsstand. Hans far Theodor von Hassel (1868–1935) var kaptein i Schutztruppe für Deutsch-Ostafrika. Etter at han hadde fullført sin aktive tjeneste, slo han seg til som plantasjeeier i den daværende tyske kolonien.