Víctima de la tuberculosis, monseñor Tovar se retiró a Tarma (sierra central del Perú), donde falleció cuando apenas había cumplido los 63 años de edad (1907).