Da andre verdenskrig brøt ut hadde Grumbach akkurat fullført førstegangstjenesten, og deltok i den franske armeen under den tyske invasjonen av Frankrike. Han ble evakuert i Operasjon Dynamo under slaget om Dunkerque i 1940.