En skadekrise på begynnelsen av 1980–81 gjorde at laget endte opp midt på tabellen og dårlig innsats i FA-cupen. Til tross for at de vant de siste syv kampene av sesongen, hadde styret bestemt seg og etter fire år uten trofé, fikk Sexton sparken.