El control castellano finalizó en 1324, cuando el rey Ismail I de Granada, aprovechando la anarquía existente en Castilla por la minoría de edad del rey Alfonso XI de Castilla, recuperó en una rápida campaña las localidades de Huéscar, Orce, Galera y Baza.