En 1584 se retiró a Sevilla renunciando a todos los cargos que poseía en la corte y a otras dignidades que le ofrecían.