Klubben ble stiftet i 1879, og deltok i FA-cupen for første i 1882/83-sesongen, da de tapte 2-1 for Aston Villa den 27. januar 1883 i turneringens 4. runde. Totalt deltok klubben seks ganger i denne turneringen på 1880-tallet.