Presidenten for Den internasjonale olympiske komité (IOC), Avery Brundage, bedømte aksjonen som en innlands, politisk meddelelse, uegnet for det apolitiske, internasjonale forumet som de olympiske leker var ment å være. Som et øyeblikkelig reaksjon på deres aksjoner krevde han Smith og Carlos suspendert fra det amerikanske laget og bannlyst fra den olympiske leiren. Da den amerikanske olympiske komiteen nektet, truet Brundage med å bannlyse hele det amerikanske løperlaget. Denne trusselen førte til at de to idrettsutøverne ble utvist fra lekene.