Toribio Pacheco y Rivero falleció en Lima, víctima de la fiebre amarilla, el 15 de mayo de 1868, siendo ya viudo de su esposa doña Josefina Hercelles González, que muriera dos meses antes, dejando tres hijas menores de edad.