På grunn av andre verdenskrig og Tysklands okkupasjon av Norge, ble den norske legasjonen avviklet. Legasjonsbygningen ble ikke tatt i bruk av norske myndigheter så lenge krigen varte. Den ble i stedet benyttet av tyske myndigheter. Bygningen ble ikke særlig ødelagt av krigshandlingene.