I 1948 ble han anklaget av hovedstyret i Den Almindelige Danske Lægeforening for å ha meldt seg til tjeneste som lege for SS på østfronten. Halvorsen benektet dette, og legeforeningens voldgiftsdomstol dømte ham kun til «en alvorlig misbilligelse» i 1949. Det var ingen krav om ekskludering, bot eller andre disiplinære foranstaltninger, men Halvorsen ble pålagt å betale saksomkostningene på 601,50 danske kroner. Halvorsen nektet å etterkomme dette kravet, og hadde heller ikke møtt under voldgiftsdomstolens forhandlinger, og han ble følgelig ekskludert av legeforeningen i 1950.