I sine unge år var Brofoss en meget talentfull friidrettsutøver. I 1928 tok han NM-sølv på 100 meter etter ha løpt på 11,1. I 1930 deltok han i friidrettslandskampen mot Sverige på Bislett stadion. Hans personlige rekord på 100 meter var 10,8, noe som fortsatt er klubbrekord i Kongsberg IF.