En 1962, por primera y única vez en su carrera, Brown no fue el mejor corredor, además las crecientes diferencias con el entrenador Paul Brown empeoraron la situación y al final de la temporada, el fullback encabezó una revuelta de los jugadores en la que le pidieron la cabeza del entrenador, más tarde Paul Brown fue despedido, siendo sustituido por Blanton Collier.