Han var sønn av politimester Sverre Hoëm (1885–1966) og husmor Arna Hoëm (født Røskeland 1893-1980).