Po vzniku Šarišského komitátu v 40. letech 13. století se stal centrem nového správního celku, sídlem Šarišských županů. Na začátku 14. století se hradu zmocnil rod Omodejů, nepřátel krále Karla Roberta. Noví majitelé hrad rozšířili o obytné i hospodářské objekty a zesílili jeho opevnění. Hradní kapitán Demeter z něj terorizoval okolní města a králi věrné zemany. Po Bitvě u Rozhanovců (1312) se stal opět královským majetkem. Král Zikmund Lucemburský daroval hrad roku 1405 Petrovi Perényimu a od něj ho později získali Šoóšovci. Na krátkou dobu, v letech 1441–1460, obsadil hrad Jan Jiskra z Brandýsa a jeho kapitáni. Po neúspěšném obléhání ho nakonec dohodou získal král Matyáš Korvín.