Nacido en 1779 en Charleston, Carolina del Sur, hijo de Elisha Ponsett y Ann Richards, fue educado en Connecticut y Europa, donde inició estudios de leyes y medicina, que abandonó.