Herberger meldte seg inn i NSDAP i 1933. Dette kom opp og ble gjenstand for en del kritikk da han i 2008 ble nominert for Hall of Fame des deutschen Sports. Noen år tidligere var det også blitt kjent at han hadde deltatt i en propagandafilm (, fra 1942) for nazistene. Den tyske forskeren og historikeren Niels Havemann konkluderte med at Herberger ikke var blitt medlem av nazipartiet på grunn av overbevisning, men mest sannsynlig, slik mange andre innen tysk idrett, på bakgrunn av ambisjoner og opportunisme.