Mellom 1954 og 1971 spilte han totalt 627 kamper for klubben og scoret seks mål. Han var klubbens lagkaptein i over ti år. Armfield spilte også 43 landskamper for hvorav 15 som kaptein. Han ble i 1959 valgt til i England, og tapte knepent avstemningen om Årets spiller i 1966 da Bobby Charlton vant prisen. På landslagets tur til Det fjerne østen i 1969 fungerte han som spiller-manager. Han avsluttet sin aktive karriere 1. mai 1971 i en kamp mot Manchester United, noe som forøvrig skulle vise seg å bli Blackpools hittil siste kamp i den øverste divisjonen i England, før de igjen rykket opp til Premier League før sesongen 2010/2011.