El obispo de Cartagena, fray Tomás del Toro, lo acusó ante el Consejo de Indias, que envió al gobernador Juan de Badillo para someterlo a juicio de residencia.