Ella Paus er ført opp i Wiens adressebøker frem til 1938 med adressen Wittegasse 8. Da nazistene rykket inn i Østerrike i 1938 ble hennes situasjon prekær – som såkalt halvjøde var hun fortsatt utsatt for diskriminering i et nazistisk styrt Østerrike, og fremtiden var svært usikker i et land preget av antisemittiske angrep og propaganda. I 1938 reiste hun og datteren Helvig fra Østerrike for godt, til eksmannen Thorleifs hjemland, 20 år etter at de ble skilt. De fikk bo i Thorleifs leilighet i Frederik Stangs gate 40 på Frogner, som stod tom etter at han hadde flyttet til slottet sitt i Sverige to år før. Da sønnen Ole, hans kone Else og deres nyfødte sønn Peter kom tilbake til Norge fra London flyttet de også inn i leiligheten. Thorleif og firmaet Thorleif Paus A/S hadde også norsk postadresse i leiligheten, selv om Thorleif ikke bodde der til vanlig.