Da Christian VI overtok tronen etter faren Frederik IV i 1730 fikk han bygningen satt i stand av Johan Cornelius Krieger året etter. Kongen startet det som skulle ha blitt en omfattende restaurering under ledelse av Laurids de Thurah i 1734. Etter at håndverkerne kom i gang med arbeidet samme år viste det seg snart at den var i svært dårlig stand og det ble besluttet å rive den til fordel for et nytt bygg.