I juni 1944 gjennomførte de allierte styrkene landgangen i Normandie. Natzweiler ligger 55 mil fra Normandie, og etter hvert følte SS det nødvendig å flytte fangene derfra. I september ble Holst overført med tog til konsentrasjonsleiren i Dachau. Etter dette ble han flyttet rundt til flere leirer, blant annet Dachau-underleiren Allach og hovedleirene Mauthausen og Melk.