Podobu renesančného zámku a jeho existenciu dokladajú staré vyobrazenia Jaroměřic (napr. z roku 1693) a skalné pivnice s chodbami. Hneď na začiatku svojej vlády dal tvrdzu na zámok prestavať Ludvík Meziříčský (vládol v rokoch 1554 – 1576). Stala sa tak zámkom s tromi jednoposchodovými krídlami. Stredné krídlo bolo obrátené k námestiu, obe bočné krídla k rieke. Súmerne upravená záhrada siahala len k rieke a pri nej bola obklopená múrom. Na západe susedila s farou.