Ella Arntsen var elev av pianisten og pianopedagogen Erling Westher. Hun studerte ved Deichmanske bibliotek i årene 1945-47. Deretter studerte hun ved University College i London i 1947-48, før hun ble musikkbibliotekar ved Deichmanske bibliotek. I 1960 tok hun filologisk embetseksamen, og hun gjennomførte dessuten spesialstudier i Tübingen og Manchester.