Signe Walle tilhørte i ungdommen kretsen rundt maleren Jacob Sømme, som var viktig for utviklingen av mange kunstnerisk anlagte ungdommer i og rundt Moss. Etter at faren Nils Walle døde i 1913, flyttet enken og de tre barna til en leilighet på Frogner i Kristiania.