Etter Tysklands overfall på Polen i 1939 fikk han jobben som leder for departementet for arbeid i generalguvernementet for Polen, under ledelse av Hans Frank. Frauendorfer var SS-Obersturmbannführer, og fra 1942 utførte han krigstjeneste.