Upload tokenizer
8ac834b
|
[PAD] |
|
[UNK] |
|
[CLS] |
|
[SEP] |
|
[MASK] |
|
ء |
|
ا |
|
ب |
|
ت |
|
ث |
|
ج |
|
ح |
|
خ |
|
د |
|
ذ |
|
ر |
|
ز |
|
س |
|
ش |
|
ص |
|
ض |
|
ط |
|
ظ |
|
ع |
|
غ |
|
ف |
|
ق |
|
ك |
|
ل |
|
م |
|
ن |
|
ه |
|
و |
|
ي |
|
پ |
|
ލ |
|
##ق |
|
##ف |
|
##ت |
|
##ك |
|
##ث |
|
##ل |
|
##د |
|
##م |
|
##ر |
|
##ع |
|
##ا |
|
##ظ |
|
##ي |
|
##ن |
|
##ء |
|
##ذ |
|
##خ |
|
##ط |
|
##ه |
|
##ح |
|
##و |
|
##غ |
|
##ص |
|
##ب |
|
##ج |
|
##س |
|
##ز |
|
##ض |
|
##ش |
|
ال |
|
##ال |
|
##يه |
|
الم |
|
الا |
|
##ات |
|
##ان |
|
##ري |
|
##لي |
|
##اء |
|
##ار |
|
##ام |
|
ان |
|
##ين |
|
##اد |
|
##ير |
|
##اب |
|
##ول |
|
علي |
|
##ون |
|
##ها |
|
الع |
|
##اع |
|
وال |
|
##ست |
|
الس |
|
الي |
|
لل |
|
الت |
|
##ور |
|
##اس |
|
##اف |
|
الج |
|
##مه |
|
##يد |
|
الح |
|
الق |
|
##رب |
|
##وا |
|
##يا |
|
الف |
|
##ره |
|
بال |
|
##له |
|
##ود |
|
##را |
|
##وم |
|
الد |
|
##لا |
|
##هم |
|
الش |
|
وا |
|
##حد |
|
##يس |
|
##نا |
|
الب |
|
##قه |
|
##يل |
|
##من |
|
##عه |
|
الر |
|
##قي |
|
##رك |
|
##نت |
|
##اه |
|
وت |
|
##مد |
|
##قد |
|
##في |
|
##وي |
|
الو |
|
##اره |
|
الن |
|
##مل |
|
##مر |
|
##ته |
|
##لس |
|
اع |
|
##يم |
|
وق |
|
الاس |
|
##راء |
|
##وري |
|
الخ |
|
مح |
|
##جه |
|
##ءيس |
|
##بي |
|
##به |
|
##ني |
|
##صر |
|
##عد |
|
##كن |
|
##وق |
|
ام |
|
##لال |
|
##هد |
|
##وس |
|
اس |
|
##بد |
|
##بر |
|
##تي |
|
##حه |
|
##لام |
|
##مال |
|
##لم |
|
الص |
|
الث |
|
##كر |
|
##تم |
|
##فا |
|
من |
|
##ده |
|
المت |
|
است |
|
الام |
|
##وله |
|
##اني |
|
##قت |
|
##ما |
|
##ريق |
|
##حت |
|
الك |
|
##سي |
|
اي |
|
##قل |
|
##جم |
|
##با |
|
##اص |
|
##دي |
|
##فه |
|
او |
|
##ضي |
|
##وع |
|
اك |
|
بن |
|
##وات |
|
##شر |
|
##طه |
|
##كه |
|
##بار |
|
##زي |
|
##نه |
|
مس |
|
##تح |
|
##لك |
|
وك |
|
وي |
|
اب |
|
اخ |
|
##وض |
|
خلال |
|
##ادي |
|
##عت |
|
##صل |
|
##شار |
|
##الي |
|
##قب |
|
سي |
|
##اله |
|
##رت |
|
##اري |
|
وم |
|
وقال |
|
الل |
|
المس |
|
الان |
|
##اده |
|
##ولي |
|
انه |
|
##خل |
|
##هر |
|
مد |
|
##اج |
|
عبد |
|
##دد |
|
##زاء |
|
##وب |
|
##يره |
|
اج |
|
##دم |
|
##عود |
|
مع |
|
مت |
|
##قا |
|
##وف |
|
##اي |
|
##وره |
|
##حي |
|
العام |
|
المن |
|
بر |
|
##رض |
|
##انيه |
|
لم |
|
##سم |
|
##صري |
|
وز |
|
تع |
|
##طر |
|
##كو |
|
##ديد |
|
بد |
|
##ضاف |
|
المد |
|
##كل |
|
الاخ |
|
##ريك |
|
##جلس |
|
##كون |
|
##اح |
|
##تر |
|
##عب |
|
##حده |
|
##انت |
|
اليوم |
|
##خص |
|
##طين |
|
والم |
|
##زه |
|
وب |
|
اف |
|
##ثر |
|
##سه |
|
العرب |
|
##ويه |
|
تم |
|
لت |
|
الرءيس |
|
الشر |
|
##طل |
|
##ينه |
|
##سب |
|
##ند |
|
محمد |
|
رءيس |
|
عام |
|
##عا |
|
##طقه |
|
##لسطين |
|
##عل |
|
##وج |
|
وان |
|
##الم |
|
##وز |
|
الجزاء |
|
بم |
|
##صد |
|
يت |
|
##قر |
|
##ابه |
|
##نظ |
|
##يش |
|
##اعه |
|
##يين |
|
##يب |
|
##اك |
|
اح |
|
##تها |
|
مر |
|
##اعب |
|
قال |
|
##ركه |
|
اله |
|
##از |
|
##طن |
|
الط |
|
##تل |
|
المح |
|
الز |
|
وح |
|
##عم |
|
وس |
|
الله |
|
الغ |
|
اد |
|
##قات |
|
##رف |
|
##وه |
|
المع |
|
##ارات |
|
يوم |
|
حس |
|
##وان |
|
وع |
|
##نتخ |
|
بان |
|
مء |
|
##ليه |
|
##ذا |
|
بت |
|
##رين |
|
##كومه |
|
##فر |
|
للم |
|
بش |
|
##كت |
|
تح |
|
##ذلك |
|
وج |
|
الما |
|
##ءه |
|
فر |
|
مست |
|
##يان |
|
##لاث |
|
##يلي |
|
الاست |
|
بل |
|
##ناء |
|
المتحده |
|
##قيه |
|
مش |
|
##قاء |
|
##زال |
|
الاه |
|
##يع |
|
##اخل |
|
##اليه |
|
السعود |
|
##وريا |
|
المر |
|
الامريك |
|
وه |
|
وفي |
|
##ضاء |
|
##فت |
|
##ارج |
|
با |
|
تق |
|
الوز |
|
##ضه |
|
##حدث |
|
ات |
|
البل |
|
الجم |
|
##باراه |
|
##اسه |
|
##رات |
|
##ابع |
|
الامن |
|
جم |
|
الاول |
|
بح |
|
وف |
|
##راءيل |
|
##كري |
|
##عي |
|
##كم |
|
مصر |
|
##قط |
|
##واجه |
|
##مالك |
|
##رد |
|
##وريه |
|
##نس |
|
##بيه |
|
احد |
|
الاسلام |
|
الاهلي |
|
عدد |
|
الاع |
|
اكثر |
|
الجزاءر |
|
##ليم |
|
قر |
|
يكن |
|
##ضيه |
|
##طال |
|
##اصه |
|
##ركز |
|
##بل |
|
العالم |
|
الفلسطين |
|
حتي |
|
يع |
|
##زب |
|
##بت |
|
##يران |
|
الفر |
|
اق |
|
والت |
|
##فع |
|
##هدف |
|
المست |
|
مجلس |
|
اعل |
|
امام |
|
##نظيم |
|
ون |
|
##دا |
|
##قبل |
|
لا |
|
ول |
|
اص |
|
موق |
|
##جل |
|
المصري |
|
الدول |
|
##تحاد |
|
##ربع |
|
##وت |
|
خط |
|
##نيه |
|
الماضي |
|
مص |
|
##جد |
|
##امه |
|
##دري |
|
##ضع |
|
واضاف |
|
التح |
|
##ابات |
|
السل |
|
حم |
|
##صف |
|
الاف |
|
##ظام |
|
##انه |
|
مخ |
|
##اءل |
|
##يف |
|
تر |
|
##ضا |
|
##غرب |
|
##ملكه |
|
قاء |
|
تش |
|
السي |
|
تزال |
|
سوريا |
|
##جي |
|
انت |
|
##اسيه |
|
##اسي |
|
|
