Han deltok selv under OL 1912 i Stockholm som en av de beste tikjemperne, han kom på 16.-plass og i diskos kom han på 22.-plass. I 1952 ble Brundage valgt til IOKs 5. president etter svenske Sigfrid Edström.