El 22 de noviembre de 1965, Patterson perdió con Ali por KOT en 12 asaltos fallando en su intento de convertirse en el primer boxeador pesado en lograr el título tres veces.