<figure><img src="image_1.png" /></figure>

To cite this version:

Nizar Habash, Hanada Taha-Thomure, Khalid N. Elmadani, Zeina Zeino, Abdallah Abushmaes. 2024. <hal-04734731>

HAL Id: hal-04734731

https://hal.science/hal-04734731v1

Preprint submitted on 14 Oct 2024

HAL is a multi-disciplinary open access archive
for the deposit and dissemination of scientific re-
search documents, whether they are published or not.
The documents may come from teaching and research
institutions in France or abroad, or from public or pri-
vate research centers.

L'archive ouverte pluridisciplinaire HAL, est des-
tinée au dépôt et à la diffusion de documents scien-
tifiques de niveau recherche, publiés ou non, émanant
des établissements d'enseignement et de recherche
français ou étrangers, des laboratoires publics ou
privés.

<figure><img src="image_2.png" /></figure>

Distributed under a Creative Commons Attribution - ShareAlike 4.0 International License
# معايير التوسيم الدقيقة لمستويات انقرائية الجمل العربية في مشروع «بارق»

نزار حبش¹ هنادا طه-ثومور² خالد المدني¹ زينة زينو² عبد الله أبو شميس³

¹مختبر كامل، جامعة نيويورك أبوظبي ²مركز زاي، جامعة زايد ³مركز أبوظبي لللغة العربية

nizar.habash@nyu.edu, hanada.thomure@zu.ac.ae

## الملخص

يسلط هذا البحث الضوء على جزء أساسي من مشروع «بارق»، المكنز العربي المتوازن لتقييم الانقرائية، والمتعلق بتطوير معايير توسيم مستويات انقرائية الجمل العربية بمقياس دقيق يشمل 19 مستوى. هدفنا إنشاء مورد شامل لتقييم انقرائية النصوص المكتوبة باللغة العربية يخدم جمهورا متنوعا من القارئين من طلاب رياض الأطفال إلى العلماء المتخصصين والمؤسسات التعليمية. نستعرض في هذه الورقة العلمية المعايير التي وضعتها لتوسيم النصوص على مستوى الجمل والتي استلهمناها من نظام د. هنادا طه لتحديد انقرائية الكتب، ونتناول تطبيقها في تدريب فريق التوسيم، ونحلل مجموعة من النصوص التي تم توسيمها.

يهدف مشروع «بارق» إلى تجميع مكنز لغوي من 10 ملايين كلمة تشمل طيفا واسعًا من الأجناس الأدبية، والموضوعات وبلدان المصدر، مع تركيز خاص على مستويات الانقرائية. ستخضع أجزاء من هذا المكنز للتوسيم بحسب المعايير التي حددناها، حيث ستشكل هذه التوسيمات أساساً لتطوير أدوات الذكاء الاصطناعي التي ستعمل على إضافة التوسيمات تلقائيا إلى باقي المكنز. يلتزم المشروع بجعل كل المساهمات مفتوحة المصدر بهدف إثراء المجتمع البحثي على نطاق واسع.

صفحة المشروع: http://barec.camel-lab.com

## 1. المقدمة

الانقرائية أو مقياس سهولة القراءة، الذي يقيس مدى سهولة قراءة وفهم القارئ للنص المكتوب، مفهوم ضروري للتواصل الفعال مع جمهور متنوع من القارئين. يرتبط هذا المقياس ارتباطا وثيقا بتصنيف النصوص إلى مستويات قرائية بناء على عوامل تشمل الإملاء، والصرف، وال نحو، وتعقيد المفردات. وبالتالي، فإن تطوير نماذج مقياسية للانقرائية أمر حيوي لتحسين معدلات القراءة، ومساعدة تعلم اللغة، وتعزيز التحصيل الأكاديمي. ومع ذلك، هناك نقص كبير في الموارد الموحدة لتقييم انقرائية النصوص عبر مستويات الكفاءة المختلفة في تعليم اللغة العربية، وتزداد هذه التحديات تعقيدًا بسبب السمات اللغوية الخاصة باللغة العربية، مثل الصرف الغني والمعجم الضخم، والإملاء المبهم أحيانا عند عدم التشكيل.

العمل المقدم في هذه الورقة هو جزء من مشروع أكبر - " المكنز المتوازن لتقييم انقرائية النصوص العربية" (BAREC بارق) - الذي يهدف إلى تطوير الموارد والأدوات لتقييم الانقرائية بدقة عبر مساحة واسعة من الأجناس الأدبية والمستويات القرائية. وهو مستوحى من مرجع تصنيف النصوص العربية طه/عربي 21 (طه-ثومور، 2017)، الذي كان له دور فعال في تصنيف أكثر من 9000 كتاب للأطفال. يسعى مشروع بارق إلى تطوير إطار معياري لتقييم مستويات انقرائية النصوص العربية على مستوى الجملة عبر 19 مستوى متميزا، تغطي مراحل رياض الأطفال إلى الدراسات الجامعية العليا.

<footnote>* هذه الورقة قُبلت للعرض في المؤتمر السنوي الثالث لمجمع الملك سلمان العالمي للغة العربية: حوسبة اللغة العربية وإثراء البيانات اللغوية، الرياض، المملكة العربية السعودية، أكتوبر 2024م.</footnote>
مساهماتنا هي كما يلي: (أ) أن نحدد إرشادات مفصلة لتوسيم تصنيف الانقرائية على مستوى الجملة بدقة عبر 19 مستوى؛ و (ب) أن نقوم بجميع مجموعة نصوص فريدة تتضمن مزيجًا متنوعًا من الأجناس الأدبية تتكون من حوالي 115 ألف كلمة، ونقوم بتوسيمها باستخدام المعايير التي طورنا.

هذه الورقة منظمة على النحو التالي: نراجع الأدبيات المتعلقة بالانقرائية في القسم 2. نقدم معايير التوسيم وتوصيات وملاحظات الموسمين في القسم 3، ونناقش اختيار البيانات والتوسيم في القسم 4. وأخيراً، نقدم نتائج اتفاق الموسمين البيني وملاحظات وتفكرات من الجمل الموسمة في القسم 5.

## 2. الأدبيات ذات الصلة

هناك اهتمام كبير في مجال الانقرائية الآلية لللغة العربية، ما أدى إلى وجود كمية كبيرة ومتنوعة من الأدبيات. للحصول على مسح حديث للأدبيات، انظر (Nassiri et al. 2023).

### 2.1 الانقرائية

وفقا لـ (2004) DuBay، ترتبط الانقرائية (readability) ارتباطًا وثيقًا بفهم ما تقرأه، وكم تتذكر منه، وسرعة قراءتك، ومدة استمرارك في القراءة. الطلاب الذين يُعطون نصوصًا أعلى من مستويات قراءتهم يتوقفون عن القراءة ويصبحون غير متحمسين للقراءة ويصبحون متعلقين غير متفاعلين. وعَرَف (1963) Klare سهولة القراءة بأنها سهولة فهم النص. رأى (2023) Nassiri et al. أن سهولة القراءة ووضوحها (readability and legibility) مرتبط ببعضهما البعض بمعنى أن النص يحتوي على ميزات خارجية مرتبطة بالشكل (إخراج النص، الخطوط المستخدمة، الشكل العام)، بالإضافة إلى الميزات المتعلقة بالمحتوى والمتعلقة بمدى مفهومية النص بالنسبة للقارئ.

ويمكننا أن نميز بين جانبين متعامدين لدقة تفاصيل مستويات الانقرائية: دقة تفاصيل متعلقة بالنص ودقة تفاصيل متعلقة بالمستوى. تشير دقة تفاصيل النص إلى حجم النص: كتاب، فصل، وثيقة، فقرة، جملة، عبارة أو كلمة. تشير دقة تفاصيل المستوى إلى درجة تفصيل نظام تصنيف الانقرائية، على سبيل المثال استخدم Al-Khalifa and Al-Ajlan (2010) مقیاسًا من 3 مستويات، بينما يحتوي الإطار الأوروبي المرجعي المشترك للفات (CEFR) على 6 مستويات (2001: Council of Europe، أبو عمشة وآخرون 2022)، بينما يحتوي نظام طه-ثومور (2017) على 19 مستوى.

### 2.2 جهود توسيم الانقرائية في اللغة العربية

جهود توسيم الانقرائية في اللغة العربية تشمل نظام تصنيف النصوص العربية الذي قدمته طه-ثومور (2017)، مستوحى من (2006) Fountas and Pinnell، ويستخدم عشرة معايير نوعية وكمية لتصنيف أدب الأطفال، مثل نوع النص، الأفكار، اختيار المفردات، بنية الجملة، والرسوم التوضيحية. تم تبني هذه المعايير من قبل مؤسسة الفكر العربي لتصنيف 9000 كتاب أطفال. كما طور مشروع «سامر» (Al Khalil et al., 2018;2020) معجمًا يحتوي على 26 ألف مدخل معجمي بمقياس انقرائي من خمس مستويات. بالإضافة إلى ذلك، استهدفت جهود تصنيف CEFR، مثل مشروع KELLY الذي قدمه (2014) Kilgarriff et al.، قوائم كلمات لتعلم اللغة، مستهدفًا أكثر 9000 كلمة شيوعًا في تسع لغات. قام (2022) Habash and Palfreyman بتوسيم مقالات قصيرة في مستويات CEFR، وأنشئ Naous مجموعة بيانات بخمس لغات، بما في ذلك العربية، تم توسيمها يدويًا على مستوى CEFR. كما أنشأت (2024) Soliman and Familiar (2024) قائمة مفردات لمستويات A1 CEFR وA2 مرتبطة بانتشارها في اللهجات العربية وتكرار استخدامها.

### 2.3 جهود قياس الانقرائية تلقائيًا في اللغة العربية

بينما نركز على توسيم الانقرائية يدويًا، لكننا نستفيد أيضًا من الأفكار والتقنيات السابقة لقياس الانقرائية تلقائيًا. وصف (2004) Al-Dawsari معادلة تشمل خمس ميزات: متوسط طول الكلمة، متوسط طول الجملة، تردد الكلمات، نسبة الجمل الاسمية، ونسبة الأسماء المعينة. استهدفت (2010) Al-Khalifa and Al-Ajlan ثلاثة مستويات للانقرائية في المناهج السعودية. قدم (2014) ARI نظام Al Tamimi et al. الذي يستخرج سبع ميزات لحساب الانقرائية.
استخدم (2016) El-Haj and Rayson OSMAN مقياس Saddiki et al.,) الذي يعد المقاطع تلقائيًا. استخدم (2018) مجموعة ميزات لتدريب مصنف يحدد مستوى الانقرائية بدقة.

اعتمد نهجنا على بعض أفكار نهج طه-ثومور (2017)، ولكننا نطبقه على مستوى الجملة/العبارة بدلاً من النص الكامل ونتجنب النظر في الجوانب المتعلقة بالوضوح (مثل حجم الخط) أو تصميم الكتاب. يتيح لنا ذلك تحكماً أفضل في محتوى النص وقياساً أكثر موضوعية للتفاوت بين المستويات داخل وحدة نصية أكبر مثل الفقرات، الفصول والكتب.

## 3. معايير توسييم مستويات الانقرائية في بارق

### 3.1. طموحات ورغبات معايير توسيم الانقرائية

نحدد طموحات ورغبات مشروع بارق لمعايير التوسيم كما يلي:

1. **تغطية شاملة:** تشمل المعايير جميع مستويات القراءة من رياض الأطفال إلى الدراسات العليا، مع تفصيل أكبر للمستويات الأهل ل توفير درجة أعلى في التحكم بتقييم النصوص للمبتدئين.

2. **تقنين موضوعي مفصل:** تطوير معايير موحدة لتقييم انقرائية النصوص العربية عبر 19 مستوى متميز، مع اعتبار اللهجات وال نحو والصرف والصوتيات والدلالات.

3. **تخفيف التحيز:** تضمين تنوع ديني وثقافي واجتماعي ولغوي في المعايير والبيانات لتجنب الصور النمطية.

4. **تغطية متوازنة:** توازن بين مستويات القراءة والأجناس الأدبية والمواضيع، مع الاعتراف بالتحديات المتعلقة بالمواد القليلة.

5. **إثراء التوسيمات:** اختيار نصوص تحتوي على توسيمات سابقة لتعزيز الفوائد من التفاعل بين الانقرائية وتوسيمات أخرى.

6. **مراقبة الجودة:** تدريب الموسمين لضبط المعايير وتحقيق اتفاق عالٍ، مع إجراء جولات توسيمية إضافية.

7. **الإتاحة:** توفير مكنز بارق والمعايير بشكل مفتوح لدعم أبحاث اللغة العربية.

8. **اعتبارات أخلاقية:** استخدام نصوص ضمن مفهوم الاستخدام العادل، ودفع أجور عادلة للموسمين مع تبسيط الواجهات لتقليل الأخطاء.

### 3.2. مستويات الانقرائية في مشروع بارق

استلهامًا من نظام تسمية مستويات الانقرائية لطه-ثومور (2017) الذي يستخدم ترتيب أبجد للحروف العربية، سنشير إلى مستوى الانقرائية في بارق كالتالي: <رقم الحرف> <اسم الحرف>. المستويات ال19 هي: 1 ألف، 2 باء، 3 جيم، 4 دال، 5 هاء، 6 واو، 7 زاي، 8 حاء، 9 طاء، 10 ياء، 20 كاف، 30 لام، 40 ميم، 50 نون، 60 سين، 70 عين، 80 فاء، 90 صاد، و100 قاف. المستويات ليست متساوية البعد، مع تمايز أدق في المستويات الأولى للأطفال والمبتدئين. يوضح الشكل 1 العلاقة البنائية عبر المستويات وتعيينها التقريبي لمورد الانقرائية (سامر) ومستويات الصفوف التعليمية، ويعرض الجدول 1 أمثلة من كل مستوى.

<figure><img src="image_3.png" /><figcaption>الشكل 1: يُظهر هرم بارق العلاقة عبر مستويات بارق وأبعادها اللغوية ومستويات سامر والمراحل التعليمية.</figcaption></figure>
<table><thead><tr><th>مثال</th><th>مستوى بارق</th></tr></thead><tbody><tr><td>أَرْنَبٌ</td><td>1 أ</td></tr><tr><td>ملعب واسع</td><td>2 ب</td></tr><tr><td>أنا أحب اللون الأحمر.</td><td>3 ج</td></tr><tr><td>الشمس تشرق في الصباح الباكر.</td><td>4 د</td></tr><tr><td>القطة تستريح على السرير وتتمتع بأشعة الشمس الدافئة.</td><td>5 هـ</td></tr><tr><td>دار قلبي البريء نصف دورة،</td><td>6 و</td></tr><tr><td>الأصدقاء يحتفلون بعيد ميلاد صديقهم بكعكة وهدايا رائعة.</td><td>7 ز</td></tr><tr><td>أستمتع إلى كل فقرة من الفقرتين الآيتين، ثم أجيب:</td><td>8 ح</td></tr><tr><td>وقال بكلام فصيح مزعج: يا سمك يا سمك هل أنت على العهد القديم مقيم</td><td>9 ط</td></tr><tr><td>وأسألتك هل كنتم تَنَهَّمونَهُ بالكذب قبل أن يقُولُ ما قال فَذَكَرْتُ أن لا،</td><td>10 ي</td></tr><tr><td>حسام سعيد قلبه بسبب فوز فريقه.</td><td>20 ك</td></tr><tr><td>لا أحد يجمع هذه الزهور معا في باقة، فهي منتشرة جدًا — حتى إنه كان من المعروف عنها أنها تنمو بين أجار الرصف، وتنبثق في كل مكان مثل الحشائش الضارة — وتحمل اسمًا قبيحًا جدًا وهو «زهور الكلاب» أو «الهندباء البرية».</td><td>30 ل</td></tr><tr><td>ومن يفعل المعروف مع غير أهله يجازى كما جوزي مجير أم عامر</td><td>40 م</td></tr><tr><td>حيث إن هذه الزيادة في الجسيمات المشحونة تشير إلى خروج المركبة من نطاق تأثير الرياح الشمسية الذي يسمى الغلاف الشمسي (والذي يعتبر حسب بعض التعاريف حدود المجموعة الشمسية).</td><td>50 ن</td></tr><tr><td>وكان من عادتها أن تقارن بينها وبين بطلة الرواية إذا أحسست منه إعجابًا بها أو ثناءً عليها، وتسلأله في ذلك أسئلة ذكية خبيثة لا تسهل المغالطة في جوابها، إلا على سبيل المزاح والمداعبة.</td><td>60 س</td></tr><tr><td>ويذهب المؤرخون إلى أن النابغة الذبياني كان من المحَكَّمين، تقام له في هذه الأسواق قبة يذهب إليها الشعراء ليعرضوا شعرهم، فمن أشاد به ذاع صيته، وتناقلت شعره الركبان.</td><td>70 ع</td></tr><tr><td>بين طعن القنا وخفق البنود</td><td>80 ف</td></tr><tr><td>إلا الأواري لأيًا ما أَبَيْنَهَا والثُّوِي كالحَوْض بالمظلومة الجلد</td><td>90 ص</td></tr><tr><td>كان حدوج المالكية غدوة خلايا سفيين بالمواصف من دد</td><td>100 ق</td></tr></tbody></table>

الجدول 1: أمثلة لمستويات الانقرائية الـ 19 في بارق

### 3.3 مبادئ تصنيف الانقرائية

في هذا القسم، نستعرض بعض المبادئ الأساسية التي نعتمدها لتصنيف مستويات الانقرائية في النصوص العربية.

القراءة والفهم تحدد سهولة القراءة والفهم مستوى انقرائية الجملة أو العبارة. نركز على نطق الحركات التي تعكس معنى الكلمة والمعنى الحرفي، وليس على التحليل النحوي أو البلاغي. المستوى المستهدف هو مستوى القارئ المستقل، وليس مستوى التعلم المدعوم من المعلمين أو الوالدين.

السياقات الأكبر تحتوي النصوص على مستويات انقرائية مختلفة، لكننا نركز على الجمل والعبارات فقط بما فيها الكلمات المفردة (مثل عناوين الكتب). ولذا فإننا نتجاهل السياق غير المتاح، مصدر النص، ونية المؤلف عند تحديد المستوى.

اعتبارات الجمهور الجمهور المستهدف هم الأفراد الذين درسوا في مدارس غير دينية، ولا نفترض معرفة مسبقة بالمصطلحات الدينية. نعتمد اللغة العربية الفصحى المعاصرة في منطقة الشرق الأوسط (مصر، الخليج، والشام) وتركز توسيع الجهود للمستقبل.
مفاحيح مستوى الانقرائية نبدأ بتحديد سهولة النص ونهدف للعثور على ميزة تفتح المستوى الأعلى الممكن. ميزة واحدة كافية لفتح المستوى الأعلى.

ملاحظة حول التشكيل التشكيل في اللغة العربية اختياري باستثناء الحالات الخاصة. التشكيلات المعجمية مهمة لكن الأدلة السياقية غالبا ما تكفي. يمكن لتشكل الكلمات البسيط أن يعزز سرعة القراءة لكن تركيزنا على تقييم المستوى. نعتبر القارئ المستقل قادرًا على الفهم دون تشکيل. في حالات الغموض، نختار القراءة الأسهل المناسبة للسياق. نشير هنا إلى أن تجاهل التشكيل يتعارض مع طه-ثومور (2017) الذي يعتبر التشكيل مهمًا للقراء الصغار، لكننا نعتبره خيارًا تصميميا للكتب يدعم مستوى الانقرائية المختار.

## 3.4 أبعاد ميزات النصوص

لتحديد مستويات انقرائية بارق، حددنا ستة أبعاد لميزات النص:

1. عدد الكلمات: عدد الكلمات الفريدة في النص، دون اعتبار التشكيل، يُستخدم لتصنيف المستويات من 1 إلى 20 ك.

2. الإملاء والصوتيات: صعوبة تحويل النص المكتوب إلى المنطوق، بما في ذلك طول الكلمات والمقاطع الصوتية، يُستخدم لتصنيف النصوص من 1 إلى 7 ز.

3. الصرف: الإعراب والتصريف: تصنيف الميزات الصرفية مثل الاشتاق والإعراب، يُستخدم لتحديد المستويات حتى 40 م.

4. الهياكل النحوية: العلاقة النحوية بين الكلمات في الجملة، يُستخدم لتصنيف النصوص حتى مستوى 60 س.

5. المفردات: اختيار الكلمات المستخدمة في النص، يشمل جميع المستويات ويركز بشكل خاص على المستويات العليا.

6. الأفكار والمحتوى: تنظيم النص من حيث المعرفة المطلوبة والتفكيك الرمزي، يُستخدم لتمييز مستويات المعرفة العامة والمخصصة.

المشکل والصعوبات: يشجع المحللون على الإبلاغ عن مشاكل نصية أو صعوبات، بما في ذلك الأخطاء الإملائية والتركيب غير النحوية واللغة العامة، والمواضيع غير المناسبة (العنصرية، التنمر، الإباحية، وما إلى ذلك).

الجدول 3 يعرض ملخصًا لتفاصيل الميزات التي نعمتها. المعايير الكاملة ستكون متاحة على صفحة المشروع

# 4 عملية توسيم مكنز بارق

## 4.1 فريق التوسيم

تألف فريق توسيم مكنز بارق من ستة ناطقين أصليين باللغة العربية، جميعهم من ذوي الخبرة في تعليم اللغة العربية. كان لدى معظم أفراد الفريق خبرة واسعة في تصنيف مستويات الانقرائية في القراءة، والتي اكتسبوها من خلال مشاركتهم في مشروع طه/عربي 21.

تبدأ عملية التوسيم مع أحد أعضاء الفريق الذي قام باختيار النصوص وتقسيم الجمل اتباعا لإرشادات تقسيم الجمل العربية التي وضعها Habash et al. (2022). بعد ذلك، يقوم الأعضاء الخمسة الأخرون بتوسيم الجمل أو العبارات من خلال واجهة بسيطة على Google Sheets. يتلقى الموسون بمجلدات تحتوي على ملفات كل منها يضم 100 جملة مختارة عشوائيًا. تم تضمين مجموعات توسيم مشتركة بشكل سري لضمان الجودة وقياس توافق الموسمين.

قبل بدء عملية التوسيم، خضع جميع الموسمين لتدريب مكثف، شمل ثلاث جولات تجريبية أولية. كانت هذه الجولات بمثابة منتديات لمناقشة معايير التوسيم بشكل معمق، مما سمح لنا وللموسمين بتحديد ومعالجة أي فجوات أو مشكلات.

## 4.2 بيانات مكنز بارق

قمنا بتجميع مكنز بارق (نسخة 0.1) ليشمل أجناسا أدبية ومواضيع متنوعة، مما أسفر عن 274 وثيقة، تم تصنيفها إلى أربع مجموعات قراء مستهدفة: الأطفال، الشباب، العربية المعاصرة للكبار، والعربية القديمة للكبار. يُظهر الجدول 2
توزيع البيانات لكل مجموعة. هدفنا كان تحقيق توازن في إجمالي عدد الكلمات عبر هذه المجموعات. ونتيجة لذلك، تحتوي مستندات الأطفال على مزيد من الجمل بسبب قصر الجمل في هذا النوع. في المتوسط، يبلغ طول الجمل في مجموعة الأطفال 7.0 كلمات، بينما يبلغ في العربية القديمة للكبار 13.7 كلمة. في المتوسط، اخترنا 419 كلمة/وثيقة، على الرغم من وجود تباين كبير بين الوثائق، التي تترافق بين الكتب الكاملة إلى الفصول أو الفقرات. جميع النصوص المختارة إما أنها خارج حقوق الطبع والنشر، أو ضمن أحجام عينات تمثيلية للاستخدام العادل. جمعنا البيانات من مصادر متنوعة، بما في ذلك المناهج التعليمية، الكتب، ويكيبيديا، نصوص ChatGPT التي تم التحقق منها يدويًا، قصائد الأطفال، مستندات الأمم المتحدة، ترجمات الأفلام، النصوص الكلاسيكية والدينية، الأعمال الأدبية، والمقالات الإخبارية. سنوفر جميع التفاصيل في صفحة المشروع.

<table><thead><tr><th>المجموعة</th><th>أمثلة</th><th>عدد النصوص</th><th>عدد العبارات</th><th>عدد الكلمات</th></tr></thead><tbody><tr><td>أطفال</td><td>المنهج الإماراتي، كتب الأطفال من هنداوي</td><td>30</td><td>4,411</td><td>30,749</td></tr><tr><td>ناشئة</td><td>المنهج الإماراتي، هنداوي، ويكيبيديا</td><td>42</td><td>2,332</td><td>29,864</td></tr><tr><td>لغة عربية حديثة</td><td>ويكي الأخبار، ترجمات أفلام، روايات</td><td>74</td><td>1,996</td><td>26,371</td></tr><tr><td>لغة عربية قديمة</td><td>القرآن الكريم، أحاديث نبوية، المعلقات، ألف ليلة وليلة</td><td>128</td><td>2,030</td><td>27,851</td></tr><tr><td>المجموع</td><td></td><td>274</td><td>10,769</td><td>114,835</td></tr></tbody></table>

الجدول 2: إحصائيات بيانات مجموعات القراء في مكنز بارق

## 5 النتائج

### 5.1 درجة اتفاق الموسمين

قمنا بإجراء أربع دراسات لتحديد مدى اتفاق الموسمين: ثلاث تتضمن كل منها 100 جملة خلال التدريب لتعزيز الاتفاق، ودراسة رسمية نهائية باستخدام 200 جملة، والتي سنعرض نتائجها لاحقاً. متوسط التطابق التام على 19 مستوى من مستويات بارق بين أي موسمين هو 49.2% فقط. السماح بمدى تطابق ضبابي يصل إلى فرق 1، 2، 3، أو 4 مستويات يزيد النسبة إلى 64.6%، 77.1%، 87.2%، و 93.2% على التوالي. متوسط الفرق بين مستويات أي موسمين هو 1.38 مستوى فقط. متوسط كابا كوهين للاتفاق بين الأزواج هو 0.44 (اتفاق معتدل) (Cohen, 1968)، مما يعكس تعقيد المهمة. نخطط لتحسين الاتفاق في التكرارات المستقبلية من خلال تعديل المعايير ومواصلة التدريب.

### 5.2 تحليل توزيع التوسيمات

إن العدد الفعلي للجمل الموسمة هو 10,896؛ ولكن تم استبعاد 1.05% بسبب مشاكل و 0.12% بسبب صعوبات. يظهر الشكل 2 توزيع التوسيمات عبر مجموعات القراء الأربع المحددة بناءً على تقديراتها السابقة. تهيمن نصوص الأطفال على المستويات الأهل (1 أ إلى 8 ح)، بينما تهيمن النصوص الكلاسيكية على المستويات الأصعب (90 ص إلى 100 ق)، كما هو متوقع. تحتوي المستويات الوسطى على مزيج من جميع المجموعات. ومن المثير للاهتمام أن بعض نصوص الأطفال تتضمن مواد متقدمة، والتي قد تحتاج إلى مراجعة، أو يمكن تبرير وجودها بأنها لأغراض تعليمية.
<figure><img src="image_4.png" /><figcaption>الشكل 2: توزيع توسيمات الانقرائية على مجموعات القراء في مكنز بارق</figcaption></figure>

## 5.3 نتائج أولية للقييم التلقائي للانقرائية

قمنا بتدريب نموذج آلي باستخدام البيانات المتاحة حالياً والموضحة في الجداول 2 و3. قسمنا البيانات عشوائياً إلى 3 فئات: التدريب، التطوير والاختبار. استخدمنا 511 جملة (5%) للاختبار ومثلها للتطوير وبقية الجمل للتدريب. ايضاً حرصنا على وجود 3 امثلة على الاقل من كل مستوى في فتني التطوير والاختبار. بالنسبة لتدريب النموذج الآلي فقد قمنا بدء التدريب من نموذج CamelBERT المدرب مسبقاً (Inoue et al., 2021). بعد انتهاء التدريب وجدنا أن دقة النموذج في فئة الاختبار هي 58%. وترتفع هذه الدقة إلى 72% إذا وضعنا سماحية خطأ بمقدار فرق مستوى واحد عن المستوى الصحيح. ايضاً، إذا قمنا بترتيب الإجابات من 1 الى 19 حسب توقع النموذج، فإن متوسط ترتيب الإجابة الصحيحة هو 2.22. أخيراً، وجدنا أن متوسط المسافة بين توقع النموذج صاحب أعلى احتمالية والاجابة الصحيحة هو 1.09 مستوى والذي يقابل 1.38 مستوى في حال مقارنته بمتوسط الفرق بين مستويات الأزواج في القسم 5.1. وطبعاً نتوقع أن نتحسن جودة التقييم الآلي بزيادة عدد الأمثلة، وهو هدف المشروع.

## 6 الاستنتاجات والعمل المستقبلی

قدمنا مشروع المكنز المتوازن للانقرائية باللغة العربية (بارق)، ومعاييره، ومجموعة بيانات نسخته الأولية (نسخة 0.1). قمنا بتحديد مجموعة من المعايير التفصيلية لـ 19 مستوى انقرائي وتفعيل استخدامها من خلال تدريب فريق من الموسيمین وتوصيف أكثر من 10,000 جملة. ستناتح المعايير ومجموعة البيانات للجمهور.

في العمل المستقبلی، نخطط لتوسيع نطاق مشروع بارق لزيادة حجم وتنوع بيانات مكنز بارق. نخطط أيضاً لمواصلة تحسين المعايير لتحديد مصادر الخلافات. كما نخطط للاستمرار باستخدام التوسيمات لتدريب وتقييم النماذج لتقييم الانقرائية تلقائياً.

### الشكر والتقدير

يتعلق مشروع بارق الدعم والتمويل من مركز أبوظبي للغة العربية / دائرة الثقافة والسياحة، الإمارات العربية المتحدة.
<table><thead><tr><th>مستوى بارق</th><th>صف ACTFL</th><th>عدد الكلمات</th><th>تهجد/ماء</th><th>تصريف والاشتاق</th><th>تراكيك نحوية</th><th>مفردات</th><th>فقرة / محتوى</th></tr></thead><tbody><tr><td>أ</td><td>Pre1-1 ادنى</td><td>كلمات من معنى واحد. وملفظين (يبدون حسم حركات الإعراب)</td><td>معرّض امرار (مكرّة/مودّن)</td><td>مكتمل/مختاط/عائِن</td><td>مكتمك</td><td>اسم جمّن</td><td>كلمة واحدة (لا تراكيك نحوية)</td></tr><tr><td>ب</td><td>1 متدني ادنى</td><td>كلمات من ٣ مقطع (بدون حساب حركات الإعراب)</td><td>معرّض امرار (مكرّة/مودّن)</td><td>جاء/إيجابية (باب بيت / بيت / بيت)</td><td>جملة اسمية (هو يلمع)</td><td>اسم علم لمعناو / سيسيم (تربيكا)</td><td>كلمة تمرّس مطلوب</td></tr><tr><td>ج</td><td>1 متدني متوسط</td><td>كلمات من ٣ مقطع (بدون حساب حركات الإعراب)</td><td>معرّض امرار (مكرّة/مودّن)</td><td>جاء/إيجابية (باب بيت / بيت / بيت)</td><td>جملة اسمية (هو يلمع)</td><td>اسم علم لمعناو / سيسيم (تربيكا)</td><td>كلمة تمرّس مطلوب</td></tr><tr><td>د</td><td>1 متدني متوسط</td><td>كلمات من ٣ مقطع (بدون حساب حركات الإعراب)</td><td>معرّض امرار (مكرّة/مودّن)</td><td>جاء/إيجابية (باب بيت / بيت / بيت)</td><td>جملة اسمية (هو يلمع)</td><td>اسم علم لمعناو / سيسيم (تربيكا)</td><td>كلمة تمرّس مطلوب</td></tr><tr><td>ه</td><td>2 اعلى متدني ادنى</td><td>كلمات من ٤ مقطع (بدون حساب حركات الإعراب)</td><td>معرّض امرار (مكرّة/مودّن)</td><td>جاء/إيجابية (باب بيت / بيت / بيت)</td><td>جملة اسمية (هو يلمع)</td><td>اسم علم لمعناو / سيسيم (تربيكا)</td><td>كلمة تمرّس مطلوب</td></tr><tr><td>و</td><td>2 متدني ادنى</td><td>كلمات من ٥ مقطع (بدون حساب حركات الإعراب)</td><td>معرّض امرار (مكرّة/مودّن)</td><td>جاء/إيجابية (باب بيت / بيت / بيت)</td><td>جملة اسمية (هو يلمع)</td><td>اسم علم لمعناو / سيسيم (تربيكا)</td><td>كلمة تمرّس مطلوب</td></tr><tr><td>ز</td><td>2 متدني ادنى</td><td>كلمات من ٦ مقطع أو أكثر (بدون حساب حركات الإعراب)</td><td>معرّض امرار (مكرّة/مودّن)</td><td>جاء/إيجابية (باب بيت / بيت / بيت)</td><td>جملة اسمية (هو يلمع)</td><td>اسم علم لمعناو / سيسيم (تربيكا)</td><td>كلمة تمرّس مطلوب</td></tr><tr><td>ط</td><td>3 متوسط ادنى</td><td>كلمات من ٧ هو اعلى عدد كلمات مطبعة غير مستكروية</td><td>معرّض امرار (مكرّة/مودّن)</td><td>جاء/إيجابية (باب بيت / بيت / بيت)</td><td>جملة اسمية (هو يلمع)</td><td>اسم علم لمعناو / سيسيم (تربيكا)</td><td>كلمة تمرّس مطلوب</td></tr><tr><td>ك</td><td>3 متوسط ادنى</td><td>كلمات من ٨ هو اعلى عدد كلمات مطبعة غير مستكروية</td><td>معرّض امرار (مكرّة/مودّن)</td><td>جاء/إيجابية (باب بيت / بيت / بيت)</td><td>جملة اسمية (هو يلمع)</td><td>اسم علم لمعناو / سيسيم (تربيكا)</td><td>كلمة تمرّس مطلوب</td></tr><tr><td>ل</td><td>4 متوسط ادنى</td><td>كلمات من ٩ هو اعلى عدد كلمات مطبعة غير مستكروية</td><td>معرّض امرار (مكرّة/مودّن)</td><td>جاء/إيجابية (باب بيت / بيت / بيت)</td><td>جملة اسمية (هو يلمع)</td><td>اسم علم لمعناو / سيسيم (تربيكا)</td><td>كلمة تمرّس مطلوب</td></tr><tr><td>م</td><td>5 متوسط ادنى</td><td>كلمات من ١٠ هو اعلى عدد كلمات مطبعة غير مستكروية</td><td>معرّض امرار (مكرّة/مودّن)</td><td>جاء/إيجابية (باب بيت / بيت / بيت)</td><td>جملة اسمية (هو يلمع)</td><td>اسم علم لمعناو / سيسيم (تربيكا)</td><td>كلمة تمرّس مطلوب</td></tr><tr><td>ن</td><td>6-7 متوسط ادنى</td><td>كلمات من ١١ هو اعلى عدد كلمات مطبعة غير مستكروية</td><td>معرّض امرار (مكرّة/مودّن)</td><td>جاء/إيجابية (باب بيت / بيت / بيت)</td><td>جملة اسمية (هو يلمع)</td><td>اسم علم لمعناو / سيسيم (تربيكا)</td><td>كلمة تمرّس مطلوب</td></tr><tr><td>س</td><td>12 متوسط ادنى</td><td>كلمات من ١٢ هو اعلى عدد كلمات مطبعة غير مستكروية</td><td>معرّض امرار (مكرّة/مودّن)</td><td>جاء/إيجابية (باب بيت / بيت / بيت)</td><td>جملة اسمية (هو يلمع)</td><td>اسم علم لمعناو / سيسيم (تربيكا)</td><td>كلمة تمرّس مطلوب</td></tr><tr><td>ع</td><td>12 متوسط ادنى</td><td>كلمات من ١٣ هو اعلى عدد كلمات مطبعة غير مستكروية</td><td>معرّض امرار (مكرّة/مودّن)</td><td>جاء/إيجابية (باب بيت / بيت / بيت)</td><td>جملة اسمية (هو يلمع)</td><td>اسم علم لمعناو / سيسيم (تربيكا)</td><td>كلمة تمرّس مطلوب</td></tr><tr><td>ف</td><td>1-2 جامعة متوافق</td><td>كلمات من ١٤ هو اعلى عدد كلمات مطبعة غير مستكروية</td><td>معرّض امرار (مكرّة/مودّن)</td><td>جاء/إيجابية (باب بيت / بيت / بيت)</td><td>جملة اسمية (هو يلمع)</td><td>اسم علم لمعناو / سيسيم (تربيكا)</td><td>كلمة تمرّس مطلوب</td></tr><tr><td>ص</td><td>4-3 جامعة متوافق</td><td>كلمات من ١٥ هو اعلى عدد كلمات مطبعة غير مستكروية</td><td>معرّض امرار (مكرّة/مودّن)</td><td>جاء/إيجابية (باب بيت / بيت / بيت)</td><td>جملة اسمية (هو يلمع)</td><td>اسم علم لمعناو / سيسيم (تربيكا)</td><td>كلمة تمرّس مطلوب</td></tr><tr><td>ق</td><td>ص متميّص</td><td>كلمات من ١٦ هو اعلى عدد كلمات مطبعة غير مستكروية</td><td>معرّض امرار (مكرّة/مودّن)</td><td>جاء/إيجابية (باب بيت / بيت / بيت)</td><td>جملة اسمية (هو يلمع)</td><td>اسم علم لمعناو / سيسيم (تربيكا)</td><td>كلمة تمرّس مطلوب</td></tr></tbody></table>

هذا الهمس يستخدم في حالة وجني صعوبة في تقييم المستوى، المفضل استخدامه هذا الهمس حتى شملكن كل كليو عمل أن نجد ملا تأكدي بتعديلا العايبات وأيضا تفاصيل شرحية لها)

* اخطا في التأكال التالية قسم الجمل ونفيسي. أحد الحروف التالية في عامود الملاحظات

* خطأ في مماري/الدل/الفقرة << (أ)

* خطأ في التكشيل << (ب)

* خطأ في التكشيل في النماذة << (ج)

* خطأ في التكشيل عن لفظة «أيامية» (الك) << (ن)

* خطأ في التكشيل عن لفظة «البيّة» (الك) << (ن)

<caption>الجدول 3: ملخص تفاصيل الميزات المعتمدة في معايير توسيم الانقرائية في مشروع بارق</caption>
1. خالد حسن أبو عمشة، راند عبد الرحيم، هداية الشيخ علي، السيد عزت أبو الوفا، محمد إسماعيلي عليوي، بلقاسم اليوبي، محمد الجراح، صالح الحجوري، محمد مطلق، بشير العبيدي، إبراهيم الشافعي، محمد حقي صوتشن، رواية محمد جاموس، وساد نعيرات. 2022. تطبيقات الإطار المرجعي الأوروبي المشترك CEFR في تعليم اللغة العربية للناطقين بغيرها. الجزء الأول. دار كنوز المعرفة للنشر والتوزيع.

2. هنادا طه-ثومور. 2017. معايير هنادا طه لتصنيف مستويات النصوص العربية. دار الكتاب التربوي للنشر والتوزيع.

3. M Al-Dawsari. 2004. The assessment of readability books content (boys-girls) of the first grade of intermediate school according to readability standards. *Sultan Qaboos University, Muscat*.

4. Hend S Al-Khalifa and Amani A Al-Ajlan. 2010. Automatic readability measurements of the Arabic text: An exploratory study. *Arabian Journal for Science and Engineering, 35*(2 C):103-124.

5. Muhamed Al Khalil, Hind Saddiki, Nizar Habash, and Latifa Alfalasi. 2018. A Leveled Reading Corpus of Modern Standard Arabic. In *Proceedings of the Language Resources and Evaluation Conference (LREC)*, Miyazaki, Japan.

6. Muhamed Al Khalil, Nizar Habash, and Zhengyang Jiang. 2020. A large-scale leveled readability lexicon for Standard Arabic. In *Proceedings of the Twelfth Language Resources and Evaluation Conference*, pages 3053–3062, Marseille, France. European Language Resources Association.

7. Abdel Karim Al Tamimi, Manar Jaradat, Nuha Al-Jarrah, and Sahar Ghanem. 2014. AARI: automatic Arabic readability index. *International Arab Journal of Information Technology*, 11(4):370-378.

8. Jacob Cohen. 1968. Weighted kappa: Nominal scale agreement provision for scaled disagreement or partial credit. *Psychological bulletin*, 70(4):213.

9. Council of Europe. 2001. *Common European Framework of Reference for Languages: learning, teaching, assessment*. Cambridge University Press.

10. William H DuBay. 2004. The principles of readability. *Online Submission*.

11. Mahmoud El-Haj and Paul Rayson. 2016. OSMAN — a novel Arabic readability metric. In *Proceedings of the Tenth International Conference on Language Resources and Evaluation (LREC’16)*, pages 250–255, Portorož, Slovenia. European Language Resources Association (ELRA).

12. Irene C Fountas and Gay Su Pinnell. 2006. *Leveled books (k-8): Matching texts to readers for effective teaching*. Heinemann Educational Books.

13. Nizar Habash, Muhammed AbuOdeh, Dima Taji, Reem Faraj, Jamila El Gizuli, and Omar Kallas. 2022. Camel treebank: An open multi-genre Arabic dependency treebank. In *Proceedings of the Thirteenth Language Resources and Evaluation Conference*, pages 2672–2681, Marseille, France. European Language Resources Association.

14. Nizar Habash and David Palfreyman. 2022. ZAEBUC: An annotated Arabic-English bilingual writer corpus. In *Proceedings of the Language Resources and Evaluation Conference (LREC)*, Marseille, France.

15. Go Inoue, Bashar Alhafni, Nurpeiis Baimukan, Houda Bouamor, and Nizar Habash. 2021. "The Interplay of Variant, Size, and Task Type in Arabic Pre-trained Language Models." In *Proceedings of the Sixth Arabic Natural Language Processing Workshop*,

16. Adam Kilgarriff, Frieda Charalabopoulou, Maria Gavrilidou, Janne Bondi Johannessen, Saussan Khalil, Sofie Johansson Kokki- nakis, Robert Lew, Serge Sharoff, Ravikiran Vadlapudi, and Elena Volodina. 2014. Corpus-based vocabulary lists for language learners for nine languages. *Language Resources and Evaluation*, 48(1):121-163.
17. G.R. Klare. 1963. *The Measurement of Readability*. Iowa State University Press.
Pierre Lison and Jörg Tiedemann. 2016. OpenSubtitles2016: Extracting Large
Parallel Corpora from Movie and TV Subtitles. In *Proceedings of the Language
Resources and Evaluation Conference (LREC)*, Portorož, Slovenia.

18. Tarek Naous, Michael J. Ryan, Anton Lavrouk, Mohit Chandra, and Wei Xu. 2023. ReadMe++: Benchmarking Multilingual Language Models for Multi-Domain Readability Assessment. arXiv preprint. ArXiv:2305.14463 [cs].

19. Naoual Nassiri, Violetta Cavalli-Sforza, and Abdelhak Lakhouaja. 2023. Approaches, methods, and resources for assessing the readability of arabic texts. *ACM Trans. Asian Low-Resour. Lang. Inf. Process.*, 22(4).

20. Hind Saddiki, Nizar Habash, Violetta Cavalli-Sforza, and Muhamed Al Khalil. 2018. Feature optimization for predicting readability of arabic I1 and I2. In *Proceedings of the 5th Workshop on Natural Language Processing Techniques for Educational Applications*, pages 20–29.

21. Rasha Soliman and Laila Familiar. 2024. Creating a cefr arabic vocabulary profile: A frequency-based multi-dialectal approach. *Critical Multilingualism Studies*, 11(1):266–286.