Krótko po wybuchu II wojny światowej udał się wraz z Szymonem Dżiganem do Białegostoku. Stąd w wyniku agresji III Rzeszy na ZSRR musieli udać się dalej na wschód. Występowali w dalszym ciągu w duecie w żydowskich teatrach w Charkowie, Kijowie, Mińsku i Moskwie. Było to szczególnie ważne dla żydowskiej ludności spragnionej kontaktu z jidyszowym światem artystycznym, który był niszczony przez politykę nazistowskich Niemiec. Następnie wraz z Dżiganem udał się do Taszkentu, gdzie występowali dla Armii Czerwonej oraz na bankietach agentów NKWD. Ich próba przedostania się do oddziałów gen. Andersa została odebrana jako dezercja, w związku z czym Szumacher trafił do więzienia. Przetrzymywano go w Taszkencie, a później został przeniesiony do obozu pracy w Oktiabińsku, gdzie był cztery lata. Po wojnie spotkały go kolejne represje. Po zakończeniu działań zbrojnych uznano go za syjonistę, co w ZSRR równoznaczne było ze zdradą. Aresztowano go, jednak został szybko zwolniony z więzienia i w 1947 wrócił do Polski.