Solberg vokste opp på gård i Kolbu i Østre Toten som yngst av ni søsken. Han flyttet tidlig til Oslo for videre utdanning og studier, og hvor han møtte Liv-Karin (f. Sletta) som han giftet seg med og fikk fem barn med.