Su hijo mayor, Charles Stewart Hardinge (1822-1894), quien había sido su secretario privado en la India, le sucedió como 2º Vizconde Hardinge; siendo sucedido posteriormente por su hermano, Henry.