Cependant, les autorités chargées de l'organisation de l'Exposition universelle de 1904 à Saint-Louis dans le Missouri, commémorant le centenaire de la vente de la Louisiane en 1803 se montrent très intéressées voire véhémentes par l'organisation des Jeux olympiques en parallèle de l'Exposition. Coubertin, bien que partagé par une telle association après les difficultés connues lors des Jeux olympiques de 1900, organisés eux aussi pendant une exposition universelle, propose aux membres du CIO de voter afin d'entériner le transfert. Le , il réclame l'arbitrage du président américain sur ce changement de ville hôte, non sans avoir préalablement demandé aux membres du CIO leur avis. Sur les et , 14 ont voté pour, 2 contre et 5 se sont abstenus. Le transfert est finalement officiellement acté par un télégramme qu'envoie Coubertin à Furber le .