Add BERTopic model

README.md

@@ -0,0 +1,150 @@
+
+---
+tags:
+- bertopic
+library_name: bertopic
+pipeline_tag: text-classification
+---
+
+# off-eval-ar-topics
+
+This is a [BERTopic](https://github.com/MaartenGr/BERTopic) model. 
+BERTopic is a flexible and modular topic modeling framework that allows for the generation of easily interpretable topics from large datasets. 
+
+## Usage 
+
+To use this model, please install BERTopic:
+
+```
+pip install -U bertopic
+```
+
+You can use the model as follows:
+
+```python
+from bertopic import BERTopic
+topic_model = BERTopic.load("Zaid/off-eval-ar-topics")
+
+topic_model.get_topic_info()
+```
+
+## Topic overview
+
+* Number of topics: 81
+* Number of training documents: 8022
+
+<details>
+  <summary>Click here for an overview of all topics.</summary>
+  
+  | Topic ID | Topic Keywords | Topic Frequency | Label | 
+|----------|----------------|-----------------|-------| 
+| -1 | يا - الله - من - ما - في | 10 | -1_يا_الله_من_ما | 
+| 0 | اللهم - رحيم - لا - كريم - قيوم | 2956 | 0_اللهم_رحيم_لا_كريم | 
+| 1 | من - اليمن - على - في - السعودية | 552 | 1_من_اليمن_على_في | 
+| 2 | ما - من - اللي - لو - في | 288 | 2_ما_من_اللي_لو | 
+| 3 | اللى - فى - دى - على - مصر | 261 | 3_اللى_فى_دى_على | 
+| 4 | مش - اللي - ده - دي - انا | 213 | 4_مش_اللي_ده_دي | 
+| 5 | كل - ماخذ - يا - أجمل - اغلى | 210 | 5_كل_ماخذ_يا_أجمل | 
+| 6 | سقطت - سقط - برهان - القيادة - اعتصام_القيادة_العامة | 195 | 6_سقطت_سقط_برهان_القيادة | 
+| 7 | ليل - جماله - ناري - فى - ادي | 192 | 7_ليل_جماله_ناري_فى | 
+| 8 | هلا - الله - والله - فيك - يبارك | 158 | 8_هلا_الله_والله_فيك | 
+| 9 | انا - ماعندي - حل - امتحان - اني | 153 | 9_انا_ماعندي_حل_امتحان | 
+| 10 | الزمالك - الدوري - ده - الاهلي - ماتش | 151 | 10_الزمالك_الدوري_ده_الاهلي | 
+| 11 | فسواي - طرابلس - حفتر - ليبيا - بغل | 113 | 11_فسواي_طرابلس_حفتر_ليبيا | 
+| 12 | مصر - اللي - السيسي - سيسي - في | 112 | 12_مصر_اللي_السيسي_سيسي | 
+| 13 | امي - أحبك - في - ولدي - النساء | 108 | 13_امي_أحبك_في_ولدي | 
+| 14 | سلمان - عز - يطولك - المجد - الخير | 108 | 14_سلمان_عز_يطولك_المجد | 
+| 15 | طيب - وانت - وعقبال - سنة - حبيبي | 103 | 15_طيب_وانت_وعقبال_سنة | 
+| 16 | ابن - معرص - الوسخه - ولاد - خول | 102 | 16_ابن_معرص_الوسخه_ولاد | 
+| 17 | النصر - الاتحاد - الهلال - على - جمهور | 97 | 17_النصر_الاتحاد_الهلال_على | 
+| 18 | يلي - شو - لبنان - هيك - بس | 96 | 18_يلي_شو_لبنان_هيك | 
+| 19 | يخليكي - وانتي - طيبه - تسلمي - حبيبتي | 95 | 19_يخليكي_وانتي_طيبه_تسلمي | 
+| 20 | روحي - عيني - بالحب - روح - عذابي | 73 | 20_روحي_عيني_بالحب_روح | 
+| 21 | ياخذك - زوران - كلب - اليغري - الكلب | 72 | 21_ياخذك_زوران_كلب_اليغري | 
+| 22 | حلو - راجعين - بعدك - هوى - حبيبي | 68 | 22_حلو_راجعين_بعدك_هوى | 
+| 23 | اهلى - أهلي - اهلي - معاك - قدها__يا__اهلي | 67 | 23_اهلى_أهلي_اهلي_معاك | 
+| 24 | رب - باى - يلعنك - زينب - رنا | 57 | 24_رب_باى_يلعنك_زينب | 
+| 25 | رايق - بنت - دلع - بت - قلبي | 52 | 25_رايق_بنت_دلع_بت | 
+| 26 | حظهم - حلو - رباه - دايم - بعدين | 52 | 26_حظهم_حلو_رباه_دايم | 
+| 27 | الاتحاد_النصر - عميد - الاتحاد - اتحاد - اتي | 45 | 27_الاتحاد_النصر_عميد_الاتحاد_اتحاد | 
+| 28 | انه - او - في - البنت - الزواج | 43 | 28_انه_او_في_البنت | 
+| 29 | السلام - مهدي - حسين - عليك - مولاي | 43 | 29_السلام_مهدي_حسين_عليك | 
+| 30 | سلامه - الف - الزمالك - مايسترو - ساسي | 42 | 30_سلامه_الف_الزمالك_مايسترو | 
+| 31 | اخي - مش - بنتي - فضحاه - فضحي | 42 | 31_اخي_مش_بنتي_فضحاه | 
+| 32 | مجلس - وزير - الكويت - الشعب - بالواتس | 41 | 32_مجلس_وزير_الكويت_الشعب | 
+| 33 | شخصي - الحكي - نجمي - مقصدي - الأحب | 40 | 33_شخصي_الحكي_نجمي_مقصدي | 
+| 34 | ميسي - ميسى - ياعمري - كريستيانو - بوثلاثة | 40 | 34_ميسي_ميسى_ياعمري_كريستيانو | 
+| 35 | الشعب - الجزائر - الجزائري - إحفظ - صالح | 40 | 35_الشعب_الجزائر_الجزائري_إحفظ | 
+| 36 | صلاح - كومباني - سلام - عليك - ليو | 39 | 36_صلاح_كومباني_سلام_عليك | 
+| 37 | معلم - مسلمه - صيف - جاااااسر - زمن | 39 | 37_معلم_مسلمه_صيف_جاااااسر | 
+| 38 | عم - اسماعيل - حج - تعبان - معتز | 37 | 38_عم_اسماعيل_حج_تعبان | 
+| 39 | الف - بلينكس - trump - maga - لبيك | 37 | 39_الف_بلينكس_trump_maga | 
+| 40 | رب - انصرنا - غلابة - استرها - كلنا | 35 | 40_رب_انصرنا_غلابة_استرها | 
+| 41 | وانتي - طيبه - طيبة - سنة - دايما | 35 | 41_وانتي_طيبه_طيبة_سنة | 
+| 42 | اشي - هاي - بالجامعة - بس - مهو | 32 | 42_اشي_هاي_بالجامعة_بس | 
+| 43 | ألله - كريم - أستجب - تلعنه - الله | 32 | 43_ألله_كريم_أستجب_تلعنه | 
+| 44 | معيووووووووووف - ياحبيبي - سااتررررر - لهوووي - جدع | 31 | 44_معيووووووووووف_ياحبيبي_سااتررررر_لهوووي | 
+| 45 | عام - أجمل - خريجة - خريجه - اجمل | 30 | 45_عام_أجمل_خريجة_خريجه | 
+| 46 | يارب - استجب - صمد - قيوم - رحيم | 30 | 46_يارب_استجب_صمد_قيوم | 
+| 47 | قال - فقال - رسول - سل - الله | 30 | 47_قال_فقال_رسول_سل | 
+| 48 | قل - قربك - كثر - الحيلة - شين | 27 | 48_قل_قربك_كثر_الحيلة | 
+| 49 | إلحقهم - مهدي - السلام - حسين - mahdisonofhussain | 26 | 49_إلحقهم_مهدي_السلام_حسين | 
+| 50 | الضامي - مروي - المدن - صدر - الحزين | 25 | 50_الضامي_مروي_المدن_صدر | 
+| 51 | خخخخخخخ - ههههههههههههههه - هههههههههههه - ويحرقك - تعصب | 25 | 51_خخخخخخخ_ههههههههههههههه_هههههههههههه_ويحرقك | 
+| 52 | يونس - اهو - ولاد - صباحك_بيضحك_مع_يونس - صباحك_عالراديو9090 | 22 | 52_يونس_اهو_ولاد_صباحك_بيضحك_مع_يونس | 
+| 53 | وبارك - عليك - رسول - وسلم - صل | 22 | 53_وبارك_عليك_رسول_وسلم | 
+| 54 | دياري - إتكائي - ضوئي - إنشراحي - كتفي | 21 | 54_دياري_إتكائي_ضوئي_إنشراحي | 
+| 55 | كـل - ماخـذه - ضـبي - مجمع_الأدب - حـبايـب | 20 | 55_كـل_ماخـذه_ضـبي_مجمع_الأدب | 
+| 56 | توتنهام - اياكس - خالة - الليفر - كبير | 19 | 56_توتنهام_اياكس_خالة_الليفر | 
+| 57 | يشبهك - حبال - رهيب - الشوق - مشتاقلي | 19 | 57_يشبهك_حبال_رهيب_الشوق | 
+| 58 | العراق - صدام - هسه - هاي - شعب | 18 | 58_العراق_صدام_هسه_هاي | 
+| 59 | رزان - تمثيل - الشاهي - كوب - مستحيل | 17 | 59_رزان_تمثيل_الشاهي_كوب | 
+| 60 | صلاح - اعطيه - بدري - قولهم - فخر | 17 | 60_صلاح_اعطيه_بدري_قولهم | 
+| 61 | هلال - صباحات_الهلال - زعيم - الأزرق - نريد | 16 | 61_هلال_صباحات_الهلال_زعيم_الأزرق | 
+| 62 | له - كرويف - الاعتراف - مارادونا - اجبره | 15 | 62_له_كرويف_الاعتراف_مارادونا | 
+| 63 | ارحب - اسطوره - الهلال - كرت - ثوران | 15 | 63_ارحب_اسطوره_الهلال_كرت | 
+| 64 | مجلود - صغير - الرياض - ماكلينها - واوراوا | 15 | 64_مجلود_صغير_الرياض_ماكلينها | 
+| 65 | ابو - أبو - يوسف - الغالي - حبيبي | 15 | 65_ابو_أبو_يوسف_الغالي | 
+| 66 | هـ - زعـلان - تعكس - يااجمل - فـي | 14 | 66_هـ_زعـلان_تعكس_يااجمل | 
+| 67 | كيم - نقدر - ايا - كذا - نجيب | 14 | 67_كيم_نقدر_ايا_كذا | 
+| 68 | بساعة - نظيف - الصفر - معهم - مريض | 13 | 68_بساعة_نظيف_الصفر_معهم | 
+| 69 | ههههههههههههههههههههههه - هههههههههههههههههههههههههههههههههههههههههههه - وجه - هههههههههههههههههههههههههههههههههههههههههههههههههههههه - ههههههههههههههههههههههههههههههههههههههههههههههههههههههههههه | 13 | 69_ههههههههههههههههههههههه_هههههههههههههههههههههههههههههههههههههههههههه_وجه_هههههههههههههههههههههههههههههههههههههههههههههههههههههه | 
+| 70 | حماك - حمار - بلادي - اتحل - قضاة | 13 | 70_حماك_حمار_بلادي_اتحل | 
+| 71 | يسوع - المسيح - إرحمنا - الإله - المراحم | 12 | 71_يسوع_المسيح_إرحمنا_الإله | 
+| 72 | مصر - بحبك - حبوب - بيوت - بلادي | 12 | 72_مصر_بحبك_حبوب_بيوت | 
+| 73 | سيدي - maga - is - سعد - أحلى | 12 | 73_سيدي_maga_is_سعد | 
+| 74 | الصبح - بحي - الوجه - نير - تباس | 12 | 74_الصبح_بحي_الوجه_نير | 
+| 75 | عبدالله - جمالوا - بشماله - وحششش - فعادت | 12 | 75_عبدالله_جمالوا_بشماله_وحششش | 
+| 76 | تانى - ترك - هايف - بت - كمان | 11 | 76_تانى_ترك_هايف_بت | 
+| 77 | حماري - فاك - طعم - يو - اشوفك | 11 | 77_حماري_فاك_طعم_يو | 
+| 78 | علي - لهوي - عفاف - بلية - عودي | 11 | 78_علي_لهوي_عفاف_بلية | 
+| 79 | ليل - بشكل - انسان - دنيا - قربلي | 11 | 79_ليل_بشكل_انسان_دنيا |
+  
+</details>
+
+## Training hyperparameters
+
+* calculate_probabilities: False
+* language: None
+* low_memory: False
+* min_topic_size: 10
+* n_gram_range: (1, 1)
+* nr_topics: None
+* seed_topic_list: None
+* top_n_words: 10
+* verbose: False
+* zeroshot_min_similarity: 0.7
+* zeroshot_topic_list: None
+
+## Framework versions
+
+* Numpy: 1.23.5
+* HDBSCAN: 0.8.33
+* UMAP: 0.5.5
+* Pandas: 1.5.3
+* Scikit-Learn: 1.2.2
+* Sentence-transformers: 2.2.2
+* Transformers: 4.35.2
+* Numba: 0.58.1
+* Plotly: 5.15.0
+* Python: 3.10.12

config.json

@@ -0,0 +1,16 @@
+{
+  "calculate_probabilities": false,
+  "language": null,
+  "low_memory": false,
+  "min_topic_size": 10,
+  "n_gram_range": [
+    1,
+    1
+  ],
+  "nr_topics": null,
+  "seed_topic_list": null,
+  "top_n_words": 10,
+  "verbose": false,
+  "zeroshot_min_similarity": 0.7,
+  "zeroshot_topic_list": null
+}

topic_embeddings.safetensors

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:e99500b5d5d0c8290d8b0bc0ee8945b910ee8c72ecfc1d03b619d96a0727fd44
+size 248920