Han var sønn av kjøpmannen Søren Munk (1799–1847) og sønnesønn av legen Hans Munk. Faren var skipper, senere kjøpmann og belgisk visekonsul i Skien. Moren het Marie Pauline Plesner (1832–1874).