Christian August Bugge var sønn av skipsreder Jørgen Ørbeck Bugge og Guriane Olsen. Han var far til kunsthistorikeren Anders Bugge (1889–1955).