Søtpotet minner om yams, en mye brukt matvare i Vest-Afrika. Som mange andre søtpotetretter i USA, ble søtpotetpai derfor trolig utviklet av afroamerikanske slaver. I dag regnes søtpotetpai som en del av «soul food».