Moren var gravid i tredje måned da hun giftet seg med Schindler. En periode han var syk og fraværende startet hun et forhold til Schindlers kunstnerkollega Julius Victor Berger, som familien av økonomiske årsaker delte bosted med. Berger var med all sannsynlighet far til Annas andre barn, Margarethe Julie «Grete» (1880-1942). Grete var psykisk syk og moren innbilte Alma at farens difteri var den bakenforliggende årsaken. Dette fikk Alma til å bekymre seg om at også hun kunne bli syk en dag. Grete bodde på en psykiatrisk institusjon fra 1911, og ble i likhet med mange andre mentalt syke myrdet av nazistene. En kan trygt si at søsterens skjebne ikke gikk stort inn på Alma; etter at hun i 1925 oppdaget at de ikke hadde samme far, nevnes hun ikke mer i dagbøkene, og i selvbiografien fra 1950-årene omtaler hun Grete som «min uselvstendige lillesøster».