Estuvo casado con la poeta Elizabeth Chase Akers Allen desde 1860 hasta su muerte en Filadelfia en 1861, a la edad de 35 años, por causas desconocidas.