Als die von den Nationalsozialisten vereinnahmten Erneuerer 1939 in den Kulturbund zurückkehrten, übten sie starken Druck auf den Präsidenten Johann Keks und Giljum aus, unter dem sie im August 1939 von ihren Ämtern zurücktraten. Sepp Janko wurde neuer Präsident der Bewegung. Giljum übernahm im Oktober 1939 die Geschäftsführung der "Deutschen Schulstiftung", die sich um den Ausbau des Deutschen Schulwesens in Jugoslawien bemühte. Nach dem deutschen Überfall auf Jugoslawien expandierte die Organisation nach Ungarn, wozu er 1942 nach Budapest zog. Im Winter 1944 floh er vor der heranrückenden Ostfront ins österreichische Linz.