Ingemar Hedenius mor Anna, født Bergh, kom fra en norsk patrisierfamilie. Foreldrene giftet seg i 1905 og fikk tre barn: Per (1905), Ingemar og Ann Marie (1909). Foreldrene var religiøse.