Møtene ble ofte forstyrret av IRA-medlemmer, og O'Duffy viste seg å være en svak leder. Han var først og fremst en militær leder, og hans kraftige temperament var lite egnet for politikk. I september 1934 gikk han overraskende av som partileder, etter at hans dårlige dømmekraft flere ganger hadde ført til pinlige hendelser. Han valgte å gå ut av partiet, og stiftet i juni 1935 det åpent fascistiske National Corporate Party.