På grunn av sin lave popularitet, både i partiet og blant folket, blant annet etter ikke å ha klart å finne et bedre kompromissforslag for å samle nord- og sørstatene, tapte han Whigpartiets tillit og også internvalget om hvem som skulle bli deres presidentkandidat. I stedet ble general Winfield Scott fra New Jersey Whigs presidentkandidat, og William Alexander Graham fra Nord-Carolina ble visepresidentkandidat. Dessuten ble også den tidligere utenriksminister Daniel Webster fra Massachusetts presidentkandidat for Whigpartiet, uten visepresidentkandidat, noe som innebar at Whigpartiet nå hadde to presidentkandidater.