Han ble tidlig uglesett av kretsen rundt Adolf Hitler, og ble fratatt alle offentlige verv i 1933 etter at regimet hadde kalt ham en «kulturbolsjevik».