Con Clara, su primera esposa, tuvo tres hijos y dos hijas, que crio solo al morir Clara en 1869, labor que se le dificultó con una discapacidad que le obligó a pasar gran parte de su vida en muletas o en silla de ruedas.