En 1866 se casó con Sibyle Montgomery con la que tuvo cinco hijos y de la que se divorció en 1887 después de ser demandado por adulterio.