Filip IV forlangte at det ble innkalt et konsil som kunne avsette Bonifatius, som Filip anklagde for kjetteri og for mord på forgjengeren Celestin. Filip mente dessuten at paven holdt seg med en personlig «husdjevel». Det lyktes den franske kongens menn å få Bonifatius fengslet i hjembyen hans, Anagni, men etter to dager satte byens borgere paven fri. Like etter døde han av sinnsbevegelse. Hans sarkofag befinner seg i Peterskirkens krypt. Det ble nå vurdert som klokest å flytte hele pavestolen til Frankrike, for å slippe de ustanselige oppgjørene mellom rivaliserende romerske adelsfamilier; og fra 1309 fikk paven sin residens i Avignon. Samtlige syv paver i «Avignon-tiden» (som varte i nesten 70 år) var franske. De lot seg pavekrone i Lyon, og to tredjedeler av kardinalene var franske.