Morse falleció de neumonía el 2 de abril de 1872, a los 80 años, en su casa del número 5 de la Calle 22 Oeste de Nueva York, y fue sepultado en el Cementerio de Green-Wood, en Brooklyn.