Han var gift med sin kusine Ida Mathilde Aars, søster til skolegrunnleggeren Jacob Jonathan Aars. Simon og Idas datter Kathrine Hofgaard ble gift med høyesterettsadvokat og statsminister Otto B. Halvorsen.