Su padre fue James Earl Carter, un acomodado empresario agrícola que cultivaba algodón y cacahuetes y que ejercía el papel tradicional de terrateniente del sur de Estados Unidos.