Esther fungerte i mange år som hennes ektemanns sekretær og hjelp. Hun hadde som oppgave å kopiere de håndskrevne manuskriptene hans på skrivemaskinen. I tillegg drev hun husholdningen og passet på barna. Da hun uttrykte ønske om å studere og jobbe utenfor huset førte dette til konflikt med Samuel, som ikke ville ha en kone som arbeidet utenfor huset. Da hun fortalte til sin ektemann at hun ville begynne å jobbe som gymlærer på en skole svarte Agnon at han tilhørte en «gammel generasjon» og ikke var komfortabel med at hans kone skulle måtte jobbe og bidra til familiens livsopphold. Han foretrakk i så fall at hun studerte noe «for moro skyld.» Esther bestemte seg etter hvert for å begynne å jobbe likevel: Hun tok seg en jobb på et arkeologisk museum og ga ektemannen beskjed om at han måtte finne seg i det.