Myndighetene bragte ham da fra hans palass til Orientekspressen. Etter kortere opphold i Sveits og i Italiaslo han seg til slutt med i Paris med sin familie. Der døde han den 23. august 1944 i sitt hus ved Boulevard Suchet i det 16. arrondissement. Hans levninger ble overført til Medina i Saudi-Arabia.