Sem arbeidet som oppsynsmann hos entreprenørfirmaet Høyer-Ellefsen i Stavanger, som utførte byggearbeider for tyskerne. Denne posisjonen ga ham muligheten til å samle informasjon om tyske anlegg og infrastruktur i Rogaland. Han avdekket detaljer om tyske militære operasjoner, inkludert tilstedeværelsen av tyske miniubåter på Sola.