Under andre verdenskrig flyktet Ortvad til Sverige på grunn av sine kommunistiske sympatier og sin kones jødiske bakgrunn. I 1962 vendte han tilbake til Sverige og bosatte seg i Kvänjarp utenfor Ljungby i Småland, hvor han oppholdt seg resten av sitt liv.