Gjennom middelalderen byttet Kłodzko hender flere ganger. Den polske kongen Bolesław hadde strategiske interesser i Schlesien, og han erobret byen flere ganger på grunn av dette. Etter et böhmisk angrep i 1038 kom festningen under styre fra Praha, men noen år senere ble den gitt tilbake til Polen.