Seit Anfang des 19. Jahrhunderts wurde der zur Landhausstraße gehende Teil des Gebäudes als Hotel genutzt, das vor allem britische Reisende beherbergte. Nach dem Ersten Weltkrieg wurde das Haus als Wohn- und Geschäftshaus genutzt. Das Palais de Saxe wurde 1887 von Oswald Haenel umgebaut. Beide Gebäudehälften wurde bei den Luftangriffen am 13. Februar 1945 völlig zerstört.