I 1942 ble han av eksilregjeringen i London bedt om å ta seg over til Stockholm for å lede arbeidet med koordinering og finansiering av motstandsarbeidet. Dette ble utført under dekke av det såkalte Idrettskontoret (senere Sambandskontoret) ved Den norske legasjonen i Stockholm. Gram ble kontorets øverste sjef fram til 1945. I denne posisjonen inntok han en aktivistisk stilling, som kom i konflikt med regjeringens politikk – blant annet ved at han også finansierte aksjoner utført av den kommunistiske motstandsbevegelsen.