Con el apoyo del marqués de los Vélez y el arzobispo Quiroga, Antonio Pérez pidió para sí la oficina vacante de Vargas en 1568, a lo cual se opusieron el conde de Chinchón y todos los que temían al poder de Antonio Pérez.