Toralf Olsen satt i kommunestyret i Halden 1931–59, det meste av tida i formannskapet. Han var varaordfører i 1945, og ordfører fra 1946. Han var aktiv i motstandsarbeidet under krigen, og måtte rømme til Sverige i 1944.