સપ્ટેમ્બર 1857 માં, તેમણે વર્જિનિયા હોર્ટનેસ વુડ્રફ ઓફ ટુસ્કાલોસા સાથે લગ્ન કર્યાં.