Edith ble født i Norwich i Connecticut som datter til handelsmannen Charles Carow (1825–1883) og Gertrude Elizabeth Tyler (1836–1895). Gertrudes far Daniel Tyler (1799–1882) tjenestegjorde som Unionsgeneral i den amerikanske borgerkrigen.