Sus hermanas, fueron dos religiosas destacadas y cuatro de sus hermanos ingresaron con él a la orden de los jesuitas, mientras que el hermano restante fue militar de fama en Italia, Países Bajos y Aragón, siendo honrado por Felipe II a su muerte en 1595.