En 1838 se casó con Florentina O'Reilly, una viuda irlandesa arruinada mucho mayor que él y con un hijo, pero el matrimonio fue infeliz; un hijo que tuvieron murió, y él tuvo varias amantes.