Gjennom foreldrenes påvirkning fikk Baker tidlig interesse for klassisk musikk. I ungdomstiden bodde hun i York, senere i Grimsby. Fra 1953 studerte hun musikk i London med Helene Isepp og Meriel St. Clair og opptrådte som konsertsanger. 23 år gammel vant hun i 1953 . Studiene fortsatte hun i Salzburgs Mozarteum.