Les rares données disponibles indiquent qu'elle a été construite dans les années 1460 par Isa-bey Isaković, le fondateur de Novi Pazar ; mais d'autres sources suggèrent une construction plus tardive, étant donné que les frontières de l'Empire ottoman, très vite après la conquête, ont été établies beaucoup plus à l'ouest et au nord. De fait, la forteresse n'est pas mentionnée par les nombreux voyageurs des ; si l'on s'en tient à cette seconde hypothèse, la forteresse aurait été établie au moment de la Grande guerre de Vienne (1683-1690). Si l'on s'en tient à la première hypothèse, celle d'une construction au , après la défaite turque devant Vienne (1683) et l'invasion autrichienne de Skopje (1689), les autorités ottomanes, sous le règne du sultan Ahmet II (1691-1695), ont commencé à reconstruire et à renforcer l'ancienne forteresse ; cette reconstruction s'est poursuivie jusqu'en 1750. Sous le règne du sultan Abdülaziz (1861-1876), deux nouvelles tours ont été ajoutées, ainsi qu'un entrepôt d'armes et de munitions et une mosquée plus petite.