Kurz nach Abschluss des Hitler-Stalin-Pakts vom 23. August 1939, der in seinem geheimen Zusatzprotokoll Estland der sowjetischen Interessensphäre überließ, wanderte Luther im Zuge der Umsiedlung der Deutschbalten im März 1940 aus dem Baltikum aus. Er lebte im Warthegau. Während der deutschen Besetzung Estlands kehrte er von 1941 bis 1944 zeitweise in seine Heimat zurück, bevor er sich endgültig in Deutschland niederließ.