Med tiden kom dualismen i idrottsrörelsens ledning även att ifrågasättas från offentligt håll .