Det er mulig at Diego de Deza kunne ha vendt tilbake til sin gamle stilling som Storinkvisitor, for han ble påtenkt å bliu erkebiskop av Toledo (og sermed primas for Spania), men han kunne ikke til tre på grunn av sykdom. Han døde 9. juni 1523.