Han var sønn av fiskerbonde og tømrer Johannes Olsen Ribsskog og Martha Klemmetsdatter Høstland, som ett av ni søsken som vokste opp på gården Litlrisskogen (gnr. 22, bnr. 2), tidligere kalt Lille Ribsskog. Brødrene Ole Konrad Ribsskog og Bernhof Ribsskog ble også skolemenn. Adolf Ribsskog giftet seg med landhandlerdatteren Lovise Tranås fra Jøa. Paret fikk tre barn, deriblant Ragnvald Ribsskog, lektor og ordfører i Stavanger. Adolf Ribsskog var svoger av landhandler H.B. Bragstad på Jøa.