1982 માં જિમી અને રોસાલિને કાર્ટર સેન્ટરની સ્થાપના કરી, જે કાર્ટરની પ્રેસિડેન્શિયલ લાઇબ્રેરી અને એટલાન્ટામાં મ્યુઝિયમ (કેન્દ્ર અને પ્રેસિડેન્શિયલ લાયબ્રેરી સાથે મળીને કાર્ટર પ્રેસિડેન્શિયલ સેન્ટર તરીકે ઓળખાય છે) ને જોડે છે.