Etter et kort opphold på Grand Hotel i 1905 flyttet den svenske legasjonen til Inkognitogata 27. Minister Johan Beck-Friis måtte som følge av den tyske okkupasjonen gå av 15. juli 1940, og 26. august flyttet generalkonsul Claes Westring og generalkonsulatet inn i bygningen. Okkupasjonsmakten godtok representasjonen, men bare som konsulat. Konsulatet hadde også lokaler i Stenersgata 7, og det fantes et visekonsulat på Torvet 2 i Drammen.