Su esposa fue Ana de Castilla y Medoza, descendiente de la Casa real de Castilla, hija de Diego de Castilla, señor de Gor y caballerizo mayor de Carlos V, descendiente del rey Pedro I de Castilla, y su hijo, Luis de Velasco y Castilla, también llegó a ser virrey de Nueva España y del Perú.