Jabarkan Perpecahan Persatuan dari Carlo I dari Napoli

Sementara itu, di Konstantinopel, Persatuan gereja-gereja terbukti sulit diatur, dan Kaisar Mikhael memiliki kesulitan besar memaksakannya kepada rakyatnya. Namun demikian, ia membujuk Innosensius V kesungguhannya di dalam mengerjakan hal tersebut, dan Carlo sekali lagi dilarang untuk menyerang Konstantinopel. Mengetahui hal ini, Mikhael mulai kampanye di Albania pada akhir tahun 1274, di mana ia menangkap Berat, Albania dan Butrint. Ia juga menikmati beberapa keberhasilan di dalam kampanye di Euboia dan Peloponnesos.

Urusan-urusan itu berlangsung selama beberapa tahun, sampai aksesi Paus Martinus IV pada tanggal 23 Maret 1281. Paus Martinus adalah orang Prancis, dan tidak memiliki wewenang dari beberapa prekursor baru-baru ini. Ia membawa kekuatan penus kepausan ke garis belakang rencana-rencana Carlo. Perserikatan yang telah terbukti tidak mungkin dipaksakan pada Konstantinopel dibubarkan, dan Carlo diberikan otoritas untuk memulihkan Kekaisaran Romawi Timur.

Ia memulai kampanyenya di Albania, di mana jenderalnya Hugues dari Sully dengan 8,000 tentara (termasuk 2,000 kavaleri ) merebut Butrint dari Kedespotan Epirus pada tahun 1280 dan mengepung Berat. Sebuah pasukan Romawi Timur bantuan di bawah Mikhael Palaiologos Tarchaneiotes tiba pada bulan Maret 1281: Hugues dari Sully beserta pasukannya disergap dan ditangkap. Romawi Timur menguasai wilayah dalam Albania. Carlo juga tidak begitu sukses di Peloponnesos, di mana ia telah menjadi (oleh Traktat Viterbo) Pangeran Achaea setelah kematian Guillaume II Villehardouin pada tahun 1278. Baillinya Galeran dari Ivry dikalahkan di Escorta di dalam salah satu upayanya untuk melibatkan Romawi Timur, dan dipanggil kembali pada tahun 1280 dan digantikan oleh Philippe dari Lagonesse. Meskipun demikian, Carlo meluncurkan Perang Salibnya (400 kapal yang membawa 27,000 ksatria) melawan Konstantinopel di musim semi tahun 1282.