Hotellet ble rekvirert av tyskerne under andre verdenskrig, og brukt av engelske soldater etter frigjøringen. Hotellet ble i denne perioden start nedslitt og ramponert. Bygget ble restaurert rett etter krigen, og Michaelsen solgte det 1. juni 1974 til skipsreder Marlow Wangen. Hotelldriften opphørte, og det ble omgjort til kontorer. Bygget gikk under navnet «Grandgården» helt til det ble revet høsten 2017 for å gi plass til nytt stort leilighetsbygg.