Stedet har sannsynligvis også tidligere hatt befestninger, og i nærheten har man funnet spor etter en handelsplass fra 800-tallet. Befestningen hadde først et sentralt kastell av gråstein, senere ble den omgitt av en ringmur med tre tårn. Her ble det i hovedsak benyttet tegl. På slutten av 1200-tallet ble kastellet bygget om til en borg. I middelalderen ble festningen bygget om det bolig for slottshøvedsmannen.