En 1868, Terry inició una relación con el arquitecto y diseñador Edward William Godwin, a quien ella había conocido unos años antes, y con el cual fue a vivir en una casa llamada Pigeonwick, en Harpenden, Hertfordshire, retirándose de la interpretación durante seis años.