Axel Sommerfelt giftet seg med Louise Gjertsen (1866-1921) i Christiania den 3. desember 1860. Hun var datter av Fredrik Gjertsen (1831-1904) og Augusta Egeberg (1838-1916).