In 1854 forlot Matilda Hays Cushman og ble sammen med billedhuggeren Harriet Hosmer, noe som førte til en serie sjalusiscener mellom de tre kvinnene. Hays vendte etter en tid tilbake til Cushman, men forholdet var ikke som før, og i 1857 hadde Cushman en hemmelig affære med billedhuggeren Emma Stebbins. Matilda Hays oppdaget forholdet og brøt forbindelsen med Cushman. Etter en voldsom scene pakket Hays sakene sine og dro for godt. Deretter gikk hun til søksmål mot Cushman, og krevde kompensasjon fordi hun hadde ofret sin egen karriere til fordel for Cushmans. Cushman betalte henne en ukjent sum, og de to skilte lag for alltid.