Høsten 1940 ble Fermann leder for Nasjonal Samlings utenriksorganisasjon. Videre ledet han Frontkjemperkontoret fra mars 1942 og ut året. Kontoret rekrutterte soldater til SS og hjalp til med reassimilering av frontkjempere etter tjeneste ved østfronten.