波尔克在白宫的生涯损害了他的健康。当他刚任职时他充满了精力和热忱，但当他于1849年3月4日离开时，身心俱疲。他体重下降，脸上起了很多皱纹，并有了黑眼圈。据信他在路易斯安那的新奥尔良市旅行时染上了霍乱。他于1849年6月15日下午3点15分在他的新家，田纳西州纳什维尔的新家波尔克邸宅去世，终年54岁。他被安葬在波尔克住所。他留给妻子最后的话是：“莎拉，我爱你，直到永恆的世界结束，我仍将爱你（I love you, Sarah. For all eternity, I love you）。” 。她在他死后的四