Evans første kone, Harriet døde 1. januar 1858. Etter det giftet Evan seg med Frances Phelps (1826–1890), den eneste datteren av Joseph Phelps og Elizabeth Phelps, som døde 22. september 1890.