Han vokste opp på Hasle i Oslo. Han er sønn av Rolf Nicolay Skarning (f. 1933), tidligere rektor ved Oslo teknisk-maritime skole, og Kristine Elise Resen-Fellie Skarning (f. 1934), bedriftsfysioterapeut ved Jøtul og Grønvold Bedriftshelsetjeneste.