El antepasado de su padre, Francisco de Valverde y Álvarez de Toledo, sobrino del conde de Oropesa, era también hermano de fray Vicente de Valverde y padre de Francisco de Valverde y Montalvo.