Sommerfelt-Pettersen er sønn av kontreadmiral Thorleif Pettersen (1913–1995) og Lulli Pettersen f. Sommerfelt Knudtzon (1918–1982).