Wirth giftet seg med Maria Bantel og de fikk to barn. Wirth var medlem i NSDAP fra 1922 til 1923, da partiet ble forbudt. Han fornyet sitt medlemskap i 1931 og to år senere inntrådte han i SA. Etter nazistenes maktovertakelse ble han en sentral person i omdanning av politiet i Württemberg til en nazistisk organisasjon. Han fikk samtidig en ledende stilling i Sicherheitsdienst i Stuttgart. I 1939 ble Wirth medlem av SS og ble forfremmet i oktober dette år til SS-Obersturmführer. En vurdering fra 1938 beskrev Wirth som en feilfri karakter, intellektuelt velutrustet og fleksibel, energisk og utholdende.