Ali forsvarte sin tittel mot den tidligere tungvektsmesteren Floyd Patterson 22. november 1965. Før kampen ertet Ali Patterson, som var kjent for å bruke hans tidligere navn Cassius Clay. Ali selv kalte Patterson en «onkel Tom» og kalte ham «kaninen». Selv om Ali tydeligvis var Patterson overlegen, varte kampen i tolv runder før han ble utropt til vinner ved teknisk knockout. Sportsmediene kritiserte Ali for å ha lekt med Patterson i løpet av kampen. miniatyr|Ali og Brian London.