Sus enemigos intrigaron en la corte del emperador Carlos V, acusándolo de detraer oro del quinto real y del reparto a los conquistadores y sospechando que había dado orden de envenenar a su esposa Catalina Juárez y a varios de los enviados con provisiones reales.