Baumann var i sin tid aktiv langrennsløper og hundekjører. Han mottok kongepokalen i hundekjøring i 1959 og 1960. Fra 1972 til 1978 var han formann i Skiforeningen. Han var en periode første visepresident i Norges Skiforbund, før han ble president etter Per Ottesen i 1987. Han gikk av som skipresident i 1995 til fordel for Jan Jensen.