当斯、亨利·克莱和威廉·H·克劳福德）都没有赢得过半选票。众议院只好从中挑选优胜者。在他的首场演说中，波尔克表示他相信众议院选择亚当斯就违背了人民的意愿。他甚至提议废止选举团，虽然没有成功。 在众议院中，波尔克是杰克逊派民主主义的坚定支持者，反对美国第二银行，支持纸币与金银挂钩而不信任银行，重视农业而不是工业。这些行为使他得到了“小胡桃”的绰号，影射杰克逊的绰号“老胡桃”（意为“硬汉”）。杰克逊在1828年美国总统大选中击败亚当斯后，波尔克开始腾达。他成为议会里前管理集团的领袖。作为美国财政委员会的主席