Durante unos diez años fue el hombre de confianza del rey y guardó en su propio palacio el tesoro del reino, del que se apoderaron en 1354 los enemigos de Don Pedro —la poderosa familia de sus hermanos bastardos, los Trastámara— al organizar un pogromo en que saquearon la judería toledana y se apoderaron de tanto los bienes reales como los de su ministro.