Den 12. juni 1944 ble Irgens avsatt fordi han var mer opptatt av å fremheve norsk nasjonalisme enn pangermanismen. På samme tiden ble Sjøfartsdepartementet nedlagt.