El 7 de agosto de 1485, día de San Cayetano fue conquistado por los cristianos en plena Reconquista contra el Reino Nazarí de Granada, prácticamente fue destruido en la batalla, siendo luego reconstruido e iniciándose una serie de cambios adaptados a su arquitectura que no han dejado de producirse en función de la utilidad que le daban sus ocupantes a lo largo de su historia.