Olson ble olympisk mester i tautrekking under OL 1904 i St. Louis. Han var med på laget som beseiret i finalen. De andre tautrekkerne på det vinnende laget var Patrick Flanagan, Sidney Johnson, Conrad Magnusson, Henry Seiling.