Mrs. Stacey var født Mary Henrietta Banks i juli 1846, i Hollidaysburg, Blair County, Pennsylvania. Folketellingen fra 30. august 1850 sier at hun var 4 år gammel, og tilhørte husholdet til Thaddeus Banks. Den eksakte fødselsdatoen er ukjent. Faren var en presbyterianer og tilhørte det demokratiske partiet. Thaddeus Banks var også en kjent advokat i Hollidaysburg, som i 1862 ble valgt inn i Representantenes hus i Pennsylvania. Han var sønn av dommeren Ephraim Banks fra Lewistown, Pennsylvania. Hans bestefar James Banks Jr., var medlem av statens lovgivende forsamling i 1790, og var generalmajor i Pennsylvania's millitsia under 1812-krigen. Hun giftet seg med May Humphreys Stacey den 9. desember 1869.