I 1935–36 ble bygningen satt i stand av kongelig bygningsinspektør Thorvald Jørgensen til bruk for det daværende tronfølgerparet, kronprins Frederik IX og kronprinsesse Ingrid. Dronning Ingrid bodde i paléet inntil hun døde i november 2000.