Першопочатковий готичний замок було побудовано у XIV столітті. Найдавніші згадки про укріплення в Зомбковіцах-Шльонських датуються 1321 роком. У 1335 році він витримав облогу чеських військ, однак уже в наступному році був переданий Болеславом II Зембицьким в якості застави Люксембургам, і в підсумку проданий разом з містом його сином - Міколаєм Малим. Під час гуситських воєн замок було знищено, після чого вже нові власники модернізували та зміцнили його. У середині XV століття замок став власністю синів чеського короля Їржі з Подєбрад. Внаслідок атаки міщан Вроцлава, Свідниці та Ниси його було пошкоджено у 1468 році. У 1489 році замок впродовж кількох місяців облягав угорський король Матвій Корвін. Після того, як йому врешті-решт вдалося захопити замок, той залишався у його володінні до 1490 року.