Cleveland tornò in vetta alla eastern division nel 1964 con un bilancio di 10–3–1, grazie alle 1.446 yard corse da Jim Brown, ancora leader della lega. Il wide receiver rookie Paul Warfield guidò la squadra con 52 ricezioni e il quarterback Frank Ryan confermò di meritare il ruolo di titolare giocando la miglior partita della carriera nell'ultima gara della stagione contro i New York Giants, una gara in cui Cleveland necessitava di una vittoria per raggiungere la finale. In essa, i Browns erano dati per pesanti sfavoriti contro i Baltimore Colts. Molti scrittori sportivi predissero una vittoria agevole per i Colts, che avevano guidato la lega in punti segnati, grazie alle giocate del quarterback Johnny Unitas e dell'halfback Lenny Moore. La difesa dei Browns invece non dava sufficienti garanzie, avendo concesso venti primi down in più di qualsiasi altra squadra della lega. Le due squadre tuttavia non si affrontavano da tre anni. Prima della, Collier e l'allenatore dei Colts Don Shula acconsentirono a dare pieno accesso ai rispettivi video della stagione regolare. Da sempre un grande studioso del gioco, Collier si avvantaggiò pienamente dell'opportunità. I Browns puntarono su un tipo di difesa che concedeva qualcosa sui passaggi brevi ma tentava di evitare le grandi giocate. I migliori ricevitori dei Colts, Raymond Berry e Jimmy Orr, non erano particolarmente veloci. Collier fece marcare a uomo gli attaccanti avversari, dando maggior tempo alla propria linea difensiva di piazzarsi in campo e costringendo Unitas a puntare sulle proprie corse, non il suo punto forte.