Skipsreder og konsul Ole Bergesen var sønn av konsul Sigval Bergesen d.e. og far til Ole Bergesen (1916–1965) og farfar til Helge Ole Bergesen. Han var eldre bror av skipsreder Sigval Bergesen d.y. Ole Bergesen var ansatt i familiefirmaet, og eneinnehaver i perioden 1937-1948.