В польской прессе высказывались неподтверждённые предположения, что Козловский предпринимал попытки сформировать коллаборационистское «правительство» Польши, которые не увенчались успехом — немцы не склонны были восстанавливать независимость Польши ни в каком виде. Однако немцы оценили его услуги — до конца жизни он получал немецкую пенсию, проживал в отеле «Адлон» в Берлине. В 1943 году участвовал в международной комиссии, расследовавшей Катынский расстрел. Умер от ран, полученных при авианалёте.