Са превратима Ливонског рата током 16. века, крсташки редови које су некада доминирали данашњим балтичким државама су распуштени, а за регион су се бориле Шведска, Пољска и Русија. Од 1561. године северном Естонијом владала је Шведска. Швеђани су дворац претворили из тврђаве крсташа у свечани и административни центар политичке моћи у Естонији, чему замак служи и сада.