En 1760 se casó con Mary Sclater, la hermana de Elizabeth Draper, para quien Laurence Sterne escribió su "Journal a Eliza" aunque Mary murió pronto después de dar la luz a su hijo, Charles (1762 - 1811) y es enterrada en la Catedral de Santo Tomás de Mumbai.