તેમણે બે વખત લગ્ન કર્યાં: પ્રથમ સ્પેનિશ ઉત્કૃષ્ટ મહિલા, ફર્ન્સિસા ડે લા ક્યુવા, જે શક્તિશાળી ડ્યુક ઓફ અલ્બુકર્કે સાથે સંકળાયેલા હતા, અને પછી તેમના મૃત્યુ પછી, બીટ્રીઝ દે લા ક્યુવા, જે તેમને બચી ગયા અને સંક્ષિપ્તમાં 1541 માં ગવર્નર બન્યા હતા.