Sommeren 1909 suspenderte FA likegodt hele laget til Manchester United fordi de nektet å melde seg ut av spillerforeningen. Dette førte til en sterkt tilspisset situasjon, der de utestengte spillerne dannet utbryterklubben The Outcasts F.C. Charlie Roberts var etter hvert blitt Manchester Uniteds viktigste forsvarsspiller i den berømte forsvarsrekken sammen med Dick Duckworth og Alec Bell, og i kampen mot FA hadde han dessuten god støtte av en annen storspiller, superstjernen Billy Meredith. Konflikten løste seg dagen før første kamp i sesongen. Spillerne fikk fortsatt lov til å være medlem av spillerforeningen, og Charlie Roberts fikk fortsette sitt arbeid i fagorganisasjonen. Når de endelig kom i gang med fotballen i 1909-10 førte han likesågodt klubben sin til sitt andre ligamesterskap. I 1913 gikk han over til Oldham Athletic der han var kaptein for laget i deres mest suksessfulle sesong noensinne, med andreplass i ligaen. Så satte første verdenskrig en stopper for hans videre karriere som spiller.