Blaine tapte valget i 1884 med knapp margin mot Cleveland, og valget ble avgjort i delstaten New York med 1 149 stemmer i det som ble karakterisert som en bitter og personorientert valgkamp med fokus på å friske opp folks minne med kontroversielle påstander. Blant annet ble Blaine møtt med slagordet «James G. Blaine – løgneren fra Maine» av demokratene. Blaine tapte valgkampen på at han ikke tok til orde mot en antikatolsk og innvandringsfiendtlig tale som kom fra en av hans tilhengere, noe som gjorde at både katolikker og europeiske innvandrere og spesielt irer vendte ham ryggen.