Pero estas vanidades, su privilegiada posición y su enorme fortuna despertaron envidias y suspicacias incluso al mismo rey, quien mandó encarcelarlo y torturarlo hasta que se aclarara si había sustraído alguna suma al tesoro real, de forma que murió preso en las Atarazanas de Sevilla en 1360 antes de lograr el perdón.