Fram til reformasjonen ble bygningene brukt av biskopen og hans stab. Etter reformasjonen over kongen eiendomsretten. Kongsgård var bosted og arbeidsplass for kongens lensherrer og senere amtmenn, samt deres øvrige ansatte.