Entonces alcanzó su cenit de poder, coincidiendo con la agregación de la corona de Portugal a la Monarquía Hispánica, pero en los años ochenta fue perdiendo poder hasta su muerte en Madrid con su influencia disminuida, frente al ascenso del secretario Mateo Vázquez.