La población no musulmana constaba de los mozárabes y de una importante minoría judaica, así como los cautivos apresados en hechos bélicos, forzados a trabajabar en las Atarazanas, donde se construían navíos para la vigilancia ribereña y el corso, además de una significativa colonia de comerciantes extranjeros.