Frazier kuului Yhdysvaltain miesten maajoukkueen kokoonpanoon sen saavuttaessa olympiahopeaa Lake Placidissa 1932 ja MM-hopeaa Puolassa 1931.