Sin embargo, el título no tenía reconocimiento a nivel mundial, por lo que Frazier tuvo que derrotar a Jimmy Ellis en 1971 para convertirse en el campeón indiscutido de la categoría, adjudicándose los cetros del Consejo Mundial de Boxeo y la Asociación Mundial de Boxeo.