Etter krigsutbruddet deltok Gram som infanterist i kampene omkring Hamar. Samme år ble han med i motstandsarbeidet i det okkuperte Norge. I 1941 måtte han flykte til Sverige og klarte å ta seg derfra til Storbritannia via Sovjetunionen.