Ambler ble skilt fra Louise i 1958. Samme år giftet han seg med Joan Harrison som arbeidet som assisterende produsent for Alfred Hitchcock. Paret flyttet i 1969 til Sveits, hvor de bodde i 16 år før de returnerte til England. Joan døde i London i 1994, Ambler i 1998.