Formalna schizma biskupa i przekazanie majątku diecezjalnego na rzecz Gryfitów spotkały się ze sprzeciwem cesarza Karola V. Władca Rzeszy jako suweren nad Pomorzem Zachodnim rozpoczął proces kontrreformacyjny. Wykorzystując swoje zwycięstwo nad książętami protestanckimi w I wojnie szmalkaldzkiej i interim augsburskie skutecznie doprowadził do zmian w Kościele Pomorza. 1 sierpnia 1549 roku Bartłomiej Swawe został zmuszony do złożenia urzędu biskupa kamieńskiego. Kapituła katedralna w Kamieniu Pomorskim działając pod presją cesarza wybrała jego następcą Marcina Wejhera, który w 1551 roku został uznany również przez papieża i otrzymał bullę prekonizacyjną.