Før han begynte i National Football League i 1952 konkurrerte Matson i friidrett for USA under Sommer-OL i 1952 i Helsingfors i Finland. Matson vant en bronsemedalje i 400 meter og en sølvmedalje som en del av USAs stafettlag på 4 × 400 meter.