Como alcaide de la Alhambra y como asesor y amigo del propio emperador, desempeñó un importante papel en la iniciativa para la construcción del palacio de Carlos V en el recinto de la Alhambra, cuyas obras se iniciaron en 1533, tras unos años de desacuerdos sobre la ubicación y el diseño del palacio.