La muerte del virrey empeoró su situación, siendo reemplazado por Rodrigo de Quiroga; fue arrestado y enviado al Perú, donde logró reivindicarse.