Glazars far, Hugo, var bankmann og hadde vært offiser i Østerrike-Ungarns hær under første verdenskrig, der han ble såret. I 1932 skilte foreldrene seg, og fire år senere giftet moren seg igjen med en velstående lærfabrikant, Quido Bergmann, som Glazar knyttet seg til. Bergmann hadde to sønner, Karel som døde i konsentrasjonsleiren Mauthausen 16. mai 1942, og Adolf som reddet livet takket være en dansk Røde Kors-evakuering av tsjekkisk-jødiske barn yngre enn 14 år. I feriene var Glazar hos sin mors foreldre på landet, der han stortrivdes med landlivet og gårdsarbeid.