I sin levetid var Whittier blant de mest respekterte forfattere i USA. I 1871 ble han innvalgt som medlem i American Academy of Arts and Sciences.