Tras cederle el testigo a Buchanan, Pierce se retiró con su esposa a Concord, en su Nuevo Hampshire natal.