En 1851 se casó con Frances Harriet Henslow (1825–1874), hija de John Stevens Henslow.