Pierce ble født i Hillborough, New Hampshire. Hans far Benjamin Pierce var en velkjent politiker som tjente som guvernør i New Hampshire. Pierce var født i en stor familie med åtte søsken, hvorav han var født som nummer sju.