Вратислав II
Строительство здания дворцового типа на месте нынешнего дворца начал Вольф Крайирж из Крайка, бывший в 1542—1554 годах высочайшим бургграфом Чешского королевства, однако вскоре он продал недостроенный дворец роду Пернштейнов. Строительство продолжил Ярослав из Пернштейна, а закончил, очевидно, его брат Вратислав II, занимавший должность высочайшего канцлера при короле Максимилиане Габсбурге. Первоначальное здание было построено в ренессансном стиле и имело четыре крыла вокруг внутреннего двора. По фамилии своих владельцев дворец получил название Пернштейнского.