De Hildebrandska husene kom gjennom arv og ekteskap senere til familien Bonde, som er grunnen til at de er noen ganger forvirrende blir kalt «Bondeska palasset». Medlemmer av Bondefamilien fortsatte å bo på slottet på hele 1800-tallet, mens noen etasjer er også blitt leid ut.