Nogaret colaboró con los cardenales de la familia Colonna, rivales del Papa desde hacía mucho tiempo, y contra los que el Pontífice había predicado incluso una cruzada con anterioridad durante su papado.