Han var sønn av Lauritz Berg og Regine Wanvig; faren var kasserer ved Norges Bank i Trondhjem. Regine Wanvig og stortingmann Peter Rinnan var søskenbarn, begge gjennom morsslekten Hundt.