Строительство укреплений Тевтонского ордена начались вскоре после овладения возвышенностью в 1255 году. Сначала был построен земляной вал, который позже стал передней частью замка. В то же время началось и строительство главного замка, который был настолько оборонительным, что выдержал трёхлетнюю осаду, в ходе великого прусского восстания 1260 года. После битвы при Дурбе началось строительство двойной кольцевой стены, которая имела девять башен. Из этих башен только Haberturm, расположенная в северо-восточном углу, сохранилась в первоначальном виде, пока замок не был разрушен. В надписи на глиняной плите говорилось, что башня была построена Фогтом Дитрихом фон Лиделау, в 1278—1292 годах.