Gjennom mellomalderen var Fitjar fremdeles kongsgård, men kongen bodde aldri her selv og leide ut gården til adels- eller embetsmenn mot en liten avgift.