Svigersønnen, general von Krogh, fikk residere i huset i hennes fravær og etter Geheimerådinnens død. Arvingen Stie Tønsberg Schøller von Krogh bodde i Danmark og solgte i 1800 paleet til staten for 10 000 riksdaler. Paleet ble tatt i bruk som embetsbolig for stiftamtmannen og som residens for kongefamilien. Paleet ble kalt Stiftsgården og Det kongelige palé etter de ulike funksjonene. Når Kongen bodde i Stiftsgården måtte stiftamtmannen flytte ut. Norges Bank brukte kjelleren i Stiftsgården som hvelv i en periode på 1800-tallet. Da Banken ble vedtatt lagt til Trondheim i 1816 hadde staten ennå ikke noen egnet bygning til dette formålet i byen.