Con la Segunda Guerra Mundial y la invasión alemana de Noruega en 1940, la princesa Marta junto con sus hijos abandonó el país y se refugió en Suecia, su país natal, mientras que Olaf permanecía en Noruega al lado del rey.