Pedro IV intentó que se retirara a Aymerich del puesto en 1360, cuando la Inquisición interrogó al espiritualista franciscano Nicolás de Calabria.