些入侵者是努比亚人。长时期里他们是西部沙漠地区最主要的居民。拜占庭帝国的文献经常抱怨他们袭击当地偏远的修道院。在历史上，非洲北部曾多次被入侵和殖民。腓尼基（奠定了迦太基）、希腊人（主要在利比亚）、罗马人、汪达尔人、阿兰人、拜占庭、奥斯曼帝国、法国、西班牙均曾入侵非洲北部。几乎所有这些入侵者都给予柏柏尔人一定的影响。始终也有欧洲人被当作奴隶贩卖给柏柏尔人（有人估计 奥斯曼帝国时期有125万欧洲人被带到北非）。与撒哈拉以南的非洲人之间的交往也给柏柏尔人留下了影响。在有史时期中柏柏尔人向南扩张，进入撒哈拉