Heiberg var gift med Gudrun Møller, datter av ordfører og stortingsrepresentant Johan Moses Møller. Han er farbror til Edvard Heiberg og Bernt Heiberg, farfar til Karin Stoltenberg og oldefar til Jens Stoltenberg.