Han var sønn av rektor Karl Fearnley Aubert (1879–1945) og Solveig Laake (1895–1970) og forble ugift. Med broren Vilhelm Aubert (1922–1988) som var professor i sosiologi og i kretsen rundt Arne Næss, bedrev Karl fjellklatring verden over.