Trail of Tears
Der Beginn von Fort Payne war ursprünglich das Cherokee Dorf Willstown, welches der Wohnort des berühmten Cherokee Sequoyah war, der das Cherokee-Alphabet erfand. Während der Zeit der Indianer-Umsiedlung (oder der Pfad der Tränen) in den 1830er Jahren, wurde das Fort in der Stadt durch die Truppen des Major John Payne errichtet und als Konzentrationslager genutzt. Hier wurden Cherokee interniert, bis sie nach Oklahoma "abgeschoben" werden konnten.