Bergman ble født i Stockholm som barn av svensk far og norsk mor. Foreldrene ble skilt kort tid etter fødselen, og hun flyttet med moren til Norge. Hun vokste opp hos flere av morens søstre i Hardanger og Fredrikstad/Oslo. Hun ble oppfordret av sin onkel til å satse på kunstnervirke, og begynte i 1926 på SHKS, og året etter på Statens kunstakademi, hvor hun hadde Axel Revold som lærer. Hun studerte også i Wien og Paris.