Fanny por fin aceptó su propuesta matrimonial y tuvieron seis hijos, Charles Appleton (1844-1893), Ernest (1845-1921), Fanny (1847-1848), Alice Mary (1850-1928), Edith (1853-1915) y Anne Allegra (1855-1934).