Ternan contrajo matrimonio en 1876, seis años después de la muerte de Charles Dickens, y tuvo dos hijos, un varón y una mujer.