Sin embargo, en 1507, al tomar el rey Fernando de Aragón de nuevo el control de Castilla, el poder de Ovando empezó a decaer.