加里宁格勒州；而德国人则和最后的艾门兰主教受到驱逐。卡尔勒返回该地区再次开始他的主教工作，但当时的波兰政府对当地的德意志人进行驱逐和清洗。奥古斯特红衣主教阻止卡尔勒继续行使他的职责，卡尔勒逃到了未来称作西德的地方。，但从没卸职。在1946年，他被庇护十二世授予“被驱逐德国人主教的特别权利”。瓦尔米亚主教的办公地点，传统上被认为是法恩堡（弗饶姆伯克）大教堂，但在1945年后，只剩下了空壳。一个新的波兰主教区在1972年约佐夫·哲加兹加的安排下安置，搬迁至奥尔什丁。 1992年3月25日，瓦尔米亚主