I Argentina levde Skavhaug et tilbaketrukket liv, først som regnskapsmann og senere som pianist på nattklubber. Han dannet også et turnéorkester og reiste mye rundt i Sør-Amerika. Han holdt seg unna det norske miljøet i Buenos Aires og hadde lite kontakt med sitt hjemland i mange år.