تويوتومي هيده-يوشي
في عام 1580 م، بسط القائد تويوتومي هيده-يوشي سيطرته على هيميجي، ووضع يده على القصر، قام في نفس الفترة يوشيتاكا كورودا، ببناء برج ذو ثلاثة طوابق في موقع القصر. بعد معركة سيكيغاهار (1601 م)، قام سيد اليابان الأول بعد انتصاره، توكوغاوا إيئه-ياسو بمنح القصر لصهره (زوج ابنته) إيكيدا تيروماسا ع (1564-1613 م). في خلال ثمان سنوات قام الأخير بتحويل القصر، ولا زالت أبنية القصر وإلى أيامنا هذه تحتفظ بشكلها الأصلي منذ ذلك العهد. تم إنجاز آخر الهياكل الملحقة بالقصر وهو الجناح الغربي عام 1618 م.