Hans Moser wuchs in den ersten Jahren in der Schweiz auf. Sein Vater Johann Arthur Moser ging nach Verlust seiner Anstellung bei der Fliegertruppe 1926 in die USA, um eine neue Existenz aufzubauen. 1928 folgten ihm seine Frau Laura Barbara sowie die beiden Kinder Hans und Laura Moser. Bedingt durch den Börsencrash 1929 lebte die Familie in ärmlichen Verhältnissen.