只有詹姆斯·布坎南没有结婚,其性取向在学术界尚有争议。1955年,美国国会通过《总统图书馆法》,根据此法,美国总统卸任后在自己家乡建造一座图书馆,存放自己的文件,交国家档案部门管理。具体内容参见:美国总统图书馆。1999年,“有线-卫星公共事务电视网”(CSPAN)对历史学者进行调查,发现历史学家们认为乔治·华盛顿、林肯和富兰克林·罗斯福是美国最出色的三位总统,赞许度远超其他人;而威廉·亨利·哈里森、安德鲁·约翰逊、福兰克林·皮尔斯和詹姆斯·布坎南是最失败的总统。2000年,《华盛顿邮报》也做了一次调查,结果显示受调查者认为只有乔治·华盛顿、林肯和富兰克林·罗斯福这三位才能称作“伟大”的总统,而只有安德鲁·约翰逊、皮尔斯、哈定和布坎南能称作“失败者”。