Barson gikk til Aston Villa oktober 1919 for 2850 GBP, og ble, ifølge forfatterne David Goodyear og Tony Matthews, «en legende innen fotball, sannsynligvis ilagt flere suspensjoner enn noen annen engelsk forsvarsspiller», hvor han videre omtales som en kilde til revitalisering av et vaklende Villa-lag, hvis personlighet bragte fram det beste hos medspillerne.