Jordan ble født i Charlotte i North Carolina men vokste opp i Albany i Georgia. Han avla i 1967 sin grunneksamen i statsvitenskap vid University of Georgia.