Under styret til Umajjadene, ble byen ødelagt av et bysantinsk raid i 705 og igjen i 719, da en bysantinsk styrke støttet av en flåte brant ned byen og tok mange av innbyggerne som fanger. Reparasjoner og gjenoppbygginger av bygningene og festningsverkene ble startet av kalifen Umar II, som også betalte løsepenger for innbyggerne til bysantinerne. Etterfølgeren hans, Yazid II, bedret festningsverkene og forsterket den muslimske garnisonen.