Kudüs, Filistin ve Suriye bölgelerinde Karaylık 9. yüzyıla kadar yayılmaya devam etti. Suriye'deki Karayların bir kısmı 10. yüzyıldan itibaren Bizans topraklarına göçtü. 1099 yılında Haçlılar Kudüs'ü işgal ettiklerinde Rabbani Yahudilere yaptıkları zulmü Karaylara da uyguladılar, bunun üzerine cemaatin büyük bir kısmı Mısır'a ve Kuzey Afrika'nın diğer bölgelerine doğru ilerledi. 11. yüzyılda Karaylığı benimseyen bir Yahudinin gayretiyle Karaylık İspanya'da yayıldı, ancak 12. yüzyılda İspanyolların baskılarıyla Karaylar bölgeyi terk etti.