Etter mesterskapskampen trakk Saban seg til fordel for en trenerstilling ved University of Maryland, og defensive coordinator Joe Collier ble forfremmet til hovedtrener for 1966-sesongen. Kemp ledet Bills til lagets tredje divisjonstittel på rad med et sesongresultat på 9–4–1. I AFL Championship-kampen, som skulle avgjøre hvilket lag som skulle representere AFL i Super Bowl I, tapte Bills 31–7 mot Kansas City Chiefs. Kemp ble utpekt til AFL All-Star for sjette år på rad. I 1967 avsluttet Bills sesongen 4–10, og det var første gang i Kemps karriere i AFL at han ikke ble utvalgt til All-Star-kampen.