Elaine Schwartzenburg ble født i Marksville, administrasjonssenter i Avoyelles Parish som datter til Errol Schwartzenburg (1909-1999) og Myrl Dupuy Schwartzenburg (1907-2001). Hun giftet seg med Edwin Edwards i 1949.