Henry despidió a Jewett en julio de 1854, terminando con los intentos del Smithsonian para una conversión en la Biblioteca Nacional, y en 1866, Henry transfirió los 40.000 volúmenes del Smithsonian a la Biblioteca del Congreso.