I 1806 ble også kunstsamlingen fra slottet Ambras flyttet til Nedre Belvedere. Begge samlingene ble flyttet til Kunsthistoriemuseet i 1890. Den siste som bodde her var Franz Ferdinand av Østerrike-Este.