Haynes ble født i Denton i Texas og gikk ut fra Lincoln High School i Dallas i 1956. Han spilte college football på North Texas State College i Denton (nå University of North Texas) hvor han og lagkameraten Leon King spilte en stor rolle i integrering av college football i delstaten i 1957.