Hamlin fue sobrino nieto de el Senador Samuel Livermore de Nuevo Hampshire, y nieto de Stephen Emery ministro de justicia durante 1839 a 1840.