Davis spilte først college football fra 1951 til 1952 for Oklahoma Sooners på University of Oklahoma. Han tjenestegjorde deretter i United States Marine Corps fra 1953 til 1955 hvor han også spilte amerikansk fotball i San Diego og Camp Pendleton.