Elisabeth ble født inn i musikken. Hennes mor var fiolinisten Elisabeth Hals (pikenavn Müntzer), født 7. januar 1845 i Böhmen, død 1915. Elisabeth Hals-Andersens far var Carl (Carelius) Pedersøn Hals, fra Åmot i Hedemark, født 7. mars 1826, død 1906.