En 1798 su segundo hijo, Henry, murió en la infancia y la hija mayor, Mary, accidentalmente murió quemada viva, posiblemente al tratar de alimentar el fuego con virutas de madera.