Han var sønn av konsul Nils Vogt Petersen (1852–1926) og Elise Christine Vogt Petersen født Olsen (1864–?). Han hadde tre søstre i tillegg til broren Leif Høegh (1896–1974), som etablerte rederiet Leif Høegh & Co. i 1927.