Adefope est aussi une figure des instances sportives ; président du Comité olympique nigérian de 1967 à 1976 et du Comité d'organisation des Jeux africains de 1973 à Lagos, il est aussi vice-président de la Fédération des Jeux du Commonwealth de 1974 à 1982. Il est élu membre du Comité international olympique (CIO) en 1985, et est notamment membre des commissions ayant sélectionné les villes organisatrices des Jeux olympiques d'été de 2000 et de Jeux olympiques d'été de 2004. Il est sujet d'une enquête dans le cadre du scandale de l'attribution des Jeux olympiques d'hiver de 2002 mais est blanchi. Il devient membre honaraire du CIO en 2006.