Han var sønn av en skolelærer Hans Henrik Bøgh og hans hustru Marie Dorothea, f. Miller, og bror av maleren Carl Bøgh (1827–1893). Han vokste opp i et kulturinteressert småborgerlig københavnerhjem, særlig var teaterinteressen stor.