Han var gift med kunsteren Gudrun Key-Åberg. Han giftet seg på nytt etter konas død i 1982.