אזור ההפצה ההיסטורי של אוכלוסיית ברבר היה צפונה עוד בתקופה הרומית והתרכז באזור החוף של הים התיכון.
בזמן הפלישה הערבית במאה ה- 7 לספירה, המסמודה, סנהג'ה וזאנאטה היו העמים העיקריים באזור. הגירתם של הערבים לצפון אפריקה לאחר מכן דחפה את ברברס ליבשת הארץ.
כיום קהילות השפות עם שפת האם של ברבר שוכנות כמו איים באמצע אוכלוסיית הרוב הדוברת ערבית. צפיפות אוכלוסיית ברבר יורדת בהתמדה ממערב (מרוקו) למזרח (לוב). הטוארג הם האוכלוסייה הברברית הדרומית ביותר.