Ifølge Pro Football Archives var Bell født i 1937 i Georgia, mens han ifølge en artikkel i er født på Hawaii. Ifølge flere moderne kilder gikk han på Valdosta High School, men skrev at han gikk på Boy's High School i Brooklyn i New York. I et intervju i 2018 sa han at han hadde blitt tilbudt et idrettsstipend fra Kansas State University, men at han ikke kunne dra nytte av det. Bell startet militærtjenesten i United States Army i 1955 og spilte amerikansk fotball og drev friidrett for flere militærlag.