Five var bosatt i Asker mens han jobbet i hovedstaden. I 1920, etter regjeringens avgang, ble han utnevnt til Norges landbruksattaché i Amerika, og i oktober samme år dro Five med ektefellen Bodil og deres fire barn Lisbet, Merle, Siri og Tore med DS «Bergensfjord» til New York. Five hadde egentlig tenkt å ta noen års pause fra politikken og gikk med planer om å gjennomføre landbruksstudier i Roma, men allerede året etter ble han kalt hjem til Norge for å bli statsråd på nytt. Han var tilbake som landbruksattaché i Amerika 1923–1924.