Clatterbuck gikk på San Angelo High School. Han spilte senere for San Angelo College. I 1950, det ene året han var der, ledet Clatterbuck Rams til en conferencetittel og seier i Oleander Bowl. Deretter spilte han college football for Houston i 3 år. Da han forlot universitetet holdt han de fleste pasningsrekordene. Han spilte i lagets første Bowl-kamp da de vant i Salad Bowl i 1952. Han var også en pitcher på Houstons baseballag og spilte i College World Series for Cougars i 1953. I 2014 ble ha posthumt innlemmet i sin high schools æresgalleri.