Ole Didrik Lærum var den eldste av seks søsken. I 1901, da han ble født, var faren kommunelege og senere distriktslege. Familien flyttet etterhvert fra Dale til Voss, der Ole Didrik vokste opp.