I starten på 1200-tallet ble det bygget en murbygning i den sørligste delen av dagens hovedbygg. Det var ett vindu i gotisk stil. Dette huset var i mur i to etasjer. Hvilken funksjon bygningen kan ha hatt, vet vi ikke. Det har trolig vært flere typer bygninger helt fra starten av, og flere har trolig hatt husrom der. I tillegg til boliger har det trolig også vært flere driftsbygninger. Biskopen måtte bl.a. ha gode lagringsmuligheter siden det mest av inntektene og avgiftene til bispestolen, kom som naturalia.