Uploaded language model

added_tokens.json

@@ -1,4 +1 @@
-{
-  "</s>": 74,
-  "<s>": 73
-}
+{"<s>": 73, "</s>": 74}

alphabet.json

@@ -0,0 +1 @@
+{"labels": [" ", "!", "\"", "'", ",", "-", ":", "\u060c", "\u061f", "\u0621", "\u0622", "\u0623", "\u0624", "\u0626", "\u0627", "\u0628", "\u062a", "\u062b", "\u062c", "\u062d", "\u062e", "\u062f", "\u0630", "\u0631", "\u0632", "\u0633", "\u0634", "\u0635", "\u0636", "\u0637", "\u0638", "\u0639", "\u063a", "\u0641", "\u0642", "\u0644", "\u0645", "\u0646", "\u0648", "\u0649", "\u064a", "\u064b", "\u064e", "\u064f", "\u0650", "\u0651", "\u0653", "\u0654", "\u0670", "\u0679", "\u067e", "\u0686", "\u0688", "\u0691", "\u0698", "\u06a9", "\u06af", "\u06ba", "\u06be", "\u06c1", "\u06c2", "\u06c3", "\u06cc", "\u06d2", "\u06d3", "\u06d4", "\u2018", "\u2019", "\u2026", "\ufdf2", "\ufdfa", "\u2047", "", "<s>", "</s>"], "is_bpe": false}

language_model/5gram.bin

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:cc1e364371b0cbd94f6a96c595e6bfc3a83f08057f9d4f7c81b71c97af5c8d34
+size 118541

language_model/attrs.json

@@ -0,0 +1 @@
+{"alpha": 0.5, "beta": 1.5, "unk_score_offset": -10.0, "score_boundary": true}

language_model/unigrams.txt

@@ -0,0 +1,1568 @@
+</s>
+<s>
+،
+آ
+آئی
+آئین
+آئے
+آبرو
+آتا
+آثار
+آج
+آخری
+آدمی
+آرمی
+آرڈر
+آرہے
+آزما
+آزمائش
+آسانی
+آسمان
+آسٹریائی
+آف
+آلودگی
+آملیٹ
+آمیزی
+آنا
+آنے
+آواز
+آٹھ
+آپ
+آپس
+آکسائیڈ
+آگ
+آہٹ
+آیات
+آید
+آید۔
+ا
+ائی
+اب
+ابلے
+ابھر
+ابھی
+اتباع
+اتریں
+اتنا
+اتنے
+اتوار
+اتھارٹی
+اتھارٹیز
+اثاثے
+اثبات
+اثر
+اثرات
+اج
+اجازت
+اجتماعی
+اجلاس
+احیاء
+اخبار
+اختیار
+اخری
+ادارہ
+اداری
+اداکار
+اداکارہ
+اداکاری
+ادتیہ
+ارا
+ارب
+ارتقا
+ارتھ
+ارجن
+ارجنٹینا
+ارضیات
+ازدواجی
+اس
+اسامہ
+استاد
+استعمال
+استنبول
+اسلام
+اسٹیٹ
+اسپیشلسٹ
+اسکندر
+اسکے
+اسی
+اسے
+اصطلاحات
+اصلاح
+اصلیت
+اضافہ
+اضافے
+اضطراب
+اظہار
+اظہر
+اعتراضات
+اعتراف
+اعظم
+اعلان
+اغاز
+افریدی
+افغانستان
+افواج
+افواہیں
+افکار
+اقتدار
+اقتصادی
+اقدار
+اقوام
+البرٹ
+الحال
+الحق
+الدھر
+اللہ
+اللہ،
+الو
+الیکشن
+الیکٹرک
+امام
+امد
+امریکا
+امریکہ
+امریکی
+امکان
+امید
+امیر
+ان
+انتظار
+انتقال
+انجری
+انداز
+اندازہ
+انسان
+انسانیت
+انصاف
+انعقادپائلٹس
+انقلاب
+انڈا
+انڈیز
+انڈے
+انکو
+انکے
+انگیز
+انہوں
+انہیں
+او
+اور
+اوراب
+اورفسادوالوں
+اورنگزیب
+اورکی
+اونچائی
+اوپر
+ايجاد
+اُمّید
+اٹلی
+اٹھائے
+اٹھانے
+اپریل
+اپنا
+اپنی
+اپنے
+اپوزیشن
+اچھا
+اچھی
+اچھے
+اک
+اکثر
+اکشے
+اگانے
+اگر
+اگلی
+اگے
+اہتمام
+ایئر
+ایجنسیوں
+ایرانی
+ایرک
+ایس
+ایسا
+ایسی
+ایسے
+ایشوریا
+ایشیا
+ایف
+ایفیکٹ
+ایل
+ایم
+ایمان
+این
+ایونٹ
+ایک
+ایکس
+اے
+بااختیار
+بابُر
+بات
+باتیں
+بادی
+بار
+بارش
+بارود
+بارہواں
+بارے
+بازار
+بازی
+باعث
+بالا
+بامیان
+باوجود
+باکسنگ
+باہر
+باہرلے
+باہم
+بت
+بتایا
+بتدریج
+بجائے
+بجلی
+بحال
+بحث
+بخوبی
+بد
+بدترین
+بدل
+بدن
+بدہن،
+بر
+برا
+برائے
+برابر
+براجمان
+برامد
+برباد
+برداشت
+برستے
+برسوں
+برمودا
+بروئے
+برپا
+برے
+بس
+بصورت
+بعد
+بعض
+بقرہ
+بل
+بلب
+بلند
+بلکہ
+بن
+بنا
+بنائی
+بناتے
+بنانا
+بنانے
+بنایا
+بنتا
+بنجو
+بند
+بننے
+بنگلہ
+بوتلیں
+بورڈ
+بٹن
+بٹی
+بچن
+بچوں
+بچے
+بڑا
+بڑاجرم
+بڑھ
+بڑھایا۔
+بڑھتا
+بڑھتے
+بڑی
+بڑے
+بک
+بھائی
+بھابھی
+بھارت
+بھرتی
+بھرپور
+بھری
+بھلا
+بھلیکھا۔
+بھول
+بھی
+بھیگے
+بہادری
+بہار
+بہت
+بہتر
+بہترین
+بہرحال
+بی
+بیانیے
+بیدار
+بیرون
+بیزار
+بیش
+بیماریوں
+بینک
+بیوورکریٹس
+بیٹسمینوں
+بیٹھ
+بیٹھے
+بیٹی
+بے
+تائید
+تاثر
+تارڑ
+تاریخ
+تاریخی
+تالا
+تب
+تبدیل
+تبدیلی
+تجارت
+تجزیہ
+تحریر
+تحریک
+تحقیق
+تر
+ترغیب
+ترقی
+ترک
+ترین
+تشکیل
+تشہیر
+تعارف
+تعالی
+تعلق
+تعلقات
+تعلیم
+تعمیرات
+تقابل
+تقاضا
+تقاضے
+تقریبا
+تقریر
+تلاش
+تلے
+تم
+تمام
+تمل
+تمہاری
+تمہیں
+تمیم
+تن
+تنخواہ
+تنزلی
+تنہا
+تو
+توسیع
+توہین
+تک
+تھا
+تھا۔
+تھی
+تھی؟
+تھی۔
+تھے
+تھے۔
+تیار
+تیری
+تیس
+تیسرے
+تین
+ثابت
+ثناء
+ثواب
+جا
+جائزہ
+جائیں
+جائے
+جائےشاہد
+جاتا
+جاتی
+جاتیں
+جاتے
+جارہا
+جارہاہوں۔
+جاری
+جاسکتا
+جان
+جانا
+جانچا
+جانی
+جانے
+جانے۔
+جاوید
+جاپان
+جاپانی
+جاگا
+جاگنے
+جب
+جبوتی
+جبکہ
+جدید
+جذبات
+جذبہ
+جرمن
+جزوقتی
+جزوی
+جس
+جسم
+جسیہ
+جشن
+جل
+جلد
+جلدی
+جماعتیں
+جمع
+جنتی
+جنرل
+جنوبی
+جنون
+جنونی
+جنگ
+جنگیں
+جنہیں
+جو
+جواب
+جوانوں
+جوش
+جونیئر
+جوہر
+جگہ
+جھومتی
+جھونک
+جھوٹ
+جھکائو
+جہاد
+جہاں
+جی
+جیاےایف
+جیتے
+جیسی
+جیسے
+جیمی
+جین
+حاصل
+حاضری
+حال
+حالات
+حامی
+حتمی
+حد
+حرارت
+حساب
+حسین
+حصول
+حصہ
+حق
+حقدار
+حقیقی
+حل
+حماقت
+حوالے
+حکم
+حکمرانی
+حکومت
+حیائی
+حیرت
+حیف
+خارج
+خاص
+خاموشی
+خان
+خاندان
+خانقاہ
+خانہ
+خاکم
+خاکے
+خبر
+خبروں
+ختم
+خدانہ
+خزانہ
+خطرے
+خلاف
+خو
+خواب
+خواتین
+خواہ
+خوبصورتی
+خود
+خوش
+خوف
+خوفناک
+خیالی
+خیر
+خیریت
+خیریت؟
+داؤ
+دارِ
+داستان
+دانش
+دانوں
+دانیال
+درجات
+درجِ
+درجہ
+درجۂ
+درد
+درست
+درمیان
+دروازہ
+درکار
+دریا
+دس
+دست
+دفاع
+دفتر
+دل
+دلجمعی
+دلوا
+دلچسپ
+دلیل
+دماغ
+دن
+دنیا
+دو
+دوب
+دودھ
+دور
+دوران
+دوسآٹھ
+دوسرا
+دوسروں
+دوسری
+دوسرے
+دوسرےملک
+دونوں
+دوھری
+دکھائی
+دکھاتے؟
+دکھانا
+دکھانے
+دھلا
+دھلائی
+دہرائے
+دہلی
+دہلی۔
+دی
+دیا
+دیا۔
+دیتا
+دیتی
+دیدی
+دیر
+دیش
+دینا
+دینے
+دیکھ
+دیکھا
+دیکھا؟
+دیکھا۔
+دیکھنے
+دیکھیں۔
+دیگر
+دیں
+دے
+دے۔
+ذاتی
+ذکر
+رابطہ
+رات
+راج
+راحیل
+راز
+راضی۔
+راموس
+رامپال
+رانڈ
+راہ
+راہگیروں
+رجحان
+رحم
+رحمدل
+رحمٰن
+رد
+رسائی
+رستم
+رسوائی
+رسول
+رش
+رنز
+رنویر
+رنگ
+رنگا
+رنگار
+رنگریزا
+رنگی
+روئے
+روایت
+روبوٹس
+روح
+روحانیت
+روزہ
+رونا
+روپے
+روک
+رکاوٹ
+رکھا
+رکھتا
+رکھتی
+رکھے
+رکھے۔
+رہا
+رہا۔
+رہتا
+رہتے
+رہنے
+رہی
+رہے
+رہے۔
+ریاست
+ریس
+ریسلنگ
+ریلیز
+رینکنگ
+ریونیو
+ریٹائر
+زاویے
+زد
+زدور
+زرداری
+زرعی
+زمان
+زمانہ
+زمبابوے
+زمین
+زنانہ
+زندگی
+زوال
+زیادہ
+زیر
+سائنٹیفک
+ساتھ
+ساتھی
+ساز
+سال
+سالوں
+سالگرہ
+سالہ
+سامان
+سامنے
+سب
+سبحان
+سبز
+سبزہ
+سبق
+ستم
+سجادہ
+سحری
+سر
+سرانجام
+سربراہ
+سرخرو
+سروس
+سرگرم
+سری
+سطح
+سطحوں
+سعودی
+سفر
+سفرنامہ
+سلام
+سلامت
+سلامتی
+سلسلے
+سلطان
+سلطنت
+سلمان
+سماجی
+سمجھ
+سمجھا
+سمجھے
+سمیت
+سن
+سنا
+سنائی
+سنادی
+سنبھالو
+سنگاپور
+سنی
+سو
+سوال
+سوالات
+سوالوں
+سودا؟
+سورہ
+سوشل
+سونیا
+سوچ
+سوچتارہا
+سوچتے
+سوچے
+سوک
+سٹنٹس
+سپاٹا
+سپورٹ
+سڈنی
+سکتا
+سکتے
+سکیں؟
+سکے
+سی
+سیاحوں
+سیاست
+سیاسی
+سید
+سیر
+سینئرز
+سیٹ
+سیکنڈ
+سیکٹرز
+سیکھ
+سے
+سےمقدس
+سے۔
+شاء
+شائد
+شائر
+شام
+شامل
+شاہد
+شاہین
+شاید
+شبِ
+شخص
+شخصی
+شدت
+شدد
+شدہ
+شرمندگی
+شروع
+شرٹ
+شرٹس
+شرکت
+شریعت
+شریف
+شریفیہ
+شریک
+شش
+شطرنج
+شعیب
+شمیم
+شو
+شور
+شپ
+شکار
+شکر
+شکریہ
+شکست
+شہادت
+شہر
+شہریت
+شہزاد
+شیعہ
+صائم
+صاحب
+صارفین
+صبح
+صحت
+صحیفہ
+صدربننے
+صدور
+صدی
+صرف
+صفیہ
+صلاحیت
+صنعتوں
+صنعتکار
+صورت
+صورتحال
+ضائع
+ضرورت
+ضمن
+ضمنی
+ضیاء
+طالب
+طبقات
+طرح
+طرف
+طلب
+طور
+طویل
+طے
+ظاہر
+ظرافت
+ظلم
+عادت
+عاصم
+عالم
+عام
+عبادت
+عبرتناک
+عجیب
+عدالت
+عرب
+عروہ
+عزیز
+عصبیت
+عصبیتیں
+عصری
+عطافرمائے
+عقل
+علاقوں
+علاوہ
+علم
+علما
+علماء
+علی
+علیحدگی
+عمدہ
+عمر
+عمران
+عمل
+عملی
+عوام
+غرض
+غلام
+غور
+غیر
+فارغ
+فامولا
+فتنہ
+فتووں
+فتویٰ
+فرائض
+فرانس
+فراہم
+فراہمی
+فرق
+فرقت
+فروخت
+فرینچ
+فضا
+فضارومان
+فضول
+فطرت
+فطری
+فعل
+فلاں
+فلسطین
+فلم
+فلمز
+فلمیں
+فلورین
+فلیٹس
+فن
+فنش
+فکر
+فی
+فیس
+فیصلوں
+فیصلہ
+فیصلے
+فیفاورلڈ
+قائم
+قابل
+قانون
+قانونی
+قبول
+قتل
+قدر
+قدم
+قرآن
+قرار
+قریب
+قسم
+قسمتی
+قصد
+قمر
+قوانین
+قوت
+قوتیں
+قوم
+قومی
+قومیں
+قیادت
+قیام
+قیمت
+لئے
+لئے،
+لا
+لائق
+لاجک
+لاگت
+لاہور
+لبرلز
+لخت
+لسی
+لطف
+لغت
+لفظ
+لندن
+لنڈا
+لنکا
+لوٹے
+لوگ
+لوگوں
+لڑ
+لڑائی
+لڑنا
+لکھا
+لکھے
+لگ
+لگا
+لگائے
+لگانے
+لگتا
+لگتی
+لگتی۔
+لگی۔
+لگے
+لہٰذا
+لی
+لیا
+لیتے
+لیتےہیں
+لینا
+لیٹ
+لیڈر
+لیکن
+لیں
+لیں۔
+لیے
+لے
+مئی
+مائیکروسافٹ
+ماحول
+ماحولیاتی
+مارٹم
+مارکیٹ
+ماسٹر
+مال
+مالا
+مانیٹرنگ
+مانے
+ماہ��
+ماہرین
+مت
+متبادل
+متعارف
+متعلق
+متواتر
+مثال
+مجبور
+مجبوریاں
+مجھ
+مجھے
+مجید
+محترم
+محسوس
+محفوظ
+محمد
+محمود
+محنت
+محیط
+مختاری
+مختلف
+مخمصہ
+مخواہ
+مداحوں
+مدد
+مدمقابل
+مذاکرات
+مذہب
+مر
+مراعاتی
+مرتبہ
+مرحلے
+مرزا
+مرضی
+مرغی
+مرنے
+مرچ
+مریم
+مزاحیہ
+مزدوروں
+مزدوری
+مسائل
+مسافروں
+مسترد
+مستعدی
+مستقبل
+مستنصر
+مسلم
+مسلمان
+مسلک
+مسیحی
+مشرف
+مشرق
+مشرک
+مشکل
+مشہور
+مصالحہ
+مصباح
+مطابق
+مطالعے
+مطلب
+معاملہ
+معاملے
+معرفت
+معروف
+معصومیت
+معطل
+معلوم
+معمہ
+معنوں
+معیاری
+مغربی
+مغلیہ
+مفاد
+مفت
+مفر
+مقام
+مقتدی،
+مقصد
+ملا
+ملازمت
+ملک
+ملکی
+ملکیت
+ملی
+ملیں
+ممالک
+ممبئی
+ممکن
+مناسب
+منافع
+منانے
+منتظر
+منسلک
+منصبی
+منصوبوں
+منفی
+منٹ
+منہ
+موجود
+موجودہ
+موسم
+موسموں
+موضوع
+موقع
+ميٹر
+مٹا
+مٹی
+مچھ
+مک
+مکالمہ
+مکانی
+مکمل
+مکھی
+مگر
+مہر
+مہمان
+مہنگا
+مہنگائی
+میئر
+میاں
+میدان
+میر
+میرا
+میری
+میرے
+میٹھا
+میچ
+میڈیا
+میڈیاسیل
+میں
+نئی
+نئے
+نا
+نااہلی
+نابلد
+ناتجربہ
+نادہندگان
+نارتھ
+نافذہ
+نافرمانی
+ناقابل
+نام
+نامہ
+نامے
+نان
+ناپنے
+ناکام
+ناکامی
+نبرد
+نتیجہ
+نجکاری
+ندی
+نشانہ
+نشین
+نظاروں
+نظر
+نظریاتی
+نفسیات
+نقصان
+نقل
+نمائندگی
+نمک
+ننھے
+نواز
+نوازشریف
+نوح
+نور
+نوٹ
+نوکریاں
+نوید
+نپے
+نکلا
+نکلی
+نگ
+نگار
+نہ
+نہیں
+نہیں،
+نہیں۔
+نیب
+نیلو
+نے
+نےمنی
+و
+وائرس
+وائس
+وابستہ
+واحد
+وادی
+وادیٔ
+واضح
+والد
+والدین
+والی
+والے
+والے؟
+والے۔
+واٹمور
+واپس
+وثوق
+وجود
+وجہ
+ورزش
+ورنہ
+ورک
+وزن
+وزیر
+وزیراعظم
+وسطی
+وضع
+وعدہ
+وقت
+ون
+ونڈوز
+وکیل
+وگریباں
+وہ
+وہاں
+وہی
+ویرانوں
+ویسٹ
+ویلتھ
+ویمنز
+ویڈیو
+ویں
+ًپچيس
+ٹائروں
+ٹارگٹ
+ٹام
+ٹاپ
+ٹرافی
+ٹرانسفارمر
+ٹرمپ
+ٹرین
+ٹماٹر
+ٹکرائیں
+ٹکراتی
+ٹھنڈی
+ٹھنڈے
+ٹھیک
+ٹی
+ٹیزر
+ٹیسٹ
+ٹیم
+ٹینس
+ٹیکس
+ٹیکنالوجی
+پاؤں
+پائے
+پابندی
+پاتی
+پارٹی
+پاسدار
+پانچ
+پاک
+پاکستان
+پاکستانی
+پاگیا
+پایا
+پتلا
+پر
+پرستی
+پرندے
+پرور
+پروپیگنڈا
+پروڈیوسر
+پروگرام
+پرچی
+پریشر
+پریکٹس
+پر۔
+پس
+پسند
+پسینے
+پلاو
+پنجاب
+پنجابی
+پوجے
+پودے
+پوری
+پورے
+پوسٹ
+پوچھتی
+پِیٹھ
+پٹانے
+پچھلی
+پڑا
+پڑتا
+پڑوس
+پڑگئی
+پڑھے
+پڑی
+پھر
+پھیلانے
+پہ
+پہاڑ
+پہل
+پہلی
+پہلے
+پہنچ
+پی
+پیجر
+پیدا
+پیدل
+پیٹ
+پیپلز
+پیپلزپارٹی
+پیچھے
+پیچیدہ
+پیکج
+چالو
+چالیسویں
+چاولوں
+چاٹ
+چاہتا
+چاہِیے
+چاہیے۔
+چاہے
+چترال
+چلتے
+چلنے
+چلو
+چلی
+چلے۔
+چند
+چو
+چوتھا
+چول
+چولہے
+چونکا
+چوٹ
+چوٹی
+چوپڑا
+چوک
+چوہدری
+چڑ
+چکی۔
+چکے
+چھ
+چھاپ
+چھلانگ
+چھوٹا
+چھوٹی
+چھوڑ
+چھوڑنا
+چھٹکارا
+چھپ
+چھپانے
+چہل
+چیز
+چیزوں
+چیزیں
+چیف
+چیمپئن
+چیمپئنز
+چین
+چینلوں
+ڈائی
+ڈال
+ڈالا
+ڈالر
+ڈالے۔
+ڈانسز
+ڈھنڈورا
+ڈیسک
+ڈے
+ک
+کئی
+کا
+کاآغاز
+کائی
+کار
+کاربن
+کاروباری
+کارڈ
+کارکردگی
+کاری
+کاغذات
+کالم
+کام
+کامن
+کامیاب
+کامیابی
+کانگو
+کاوش
+کب
+کبھارکسی
+کبھی
+کتابچہ
+کتابیں
+کتب
+کر
+کرا
+کراس
+کرانے
+کراچی
+کرتا
+کرتی
+کرتے
+کرخفیہ
+کردار
+کردیا
+کردیے
+کررہا
+کررہی
+کررہے
+کرسکتے
+کرلی
+کرلیا
+کرلیتےہیں
+کرنا
+کرنے
+کرو
+کرواتی
+کروشیا
+کروڑوں
+کروں
+کرک
+کرکٹ
+کرگئیں
+کریں
+کرے
+کس
+کسان
+کسی
+کش
+کشمیری
+کع
+کل
+کلاں
+کلی
+کلیمز
+کم
+کمازکم
+کمرشل
+کمنٹیٹر
+کمپیوٹر
+کمیٹی
+کن
+کنشاسا
+کنندگان
+کو
+کوئلے
+کوئی
+کورونا
+کوشش
+کولاراڈو
+کون
+کونسا
+کونسل
+کوکاروبار
+کپ
+کپتان
+کپور
+کچھ
+کھائیں
+کھاتی
+کھاگئی
+ک��ل
+کھلا
+کھلاڑی
+کھلاڑیوں
+کھود
+کھولا
+کھڑی
+کھیل
+کھیلا
+کہ
+کہا
+کہانی
+کہاں
+کہتا
+کہتے
+کہنا
+کہہ
+کہیں
+کی
+کیا
+کیجئے
+کیخلاف
+کیربیئنز
+کیسز
+کیسی
+کیسے
+کیلئے
+کیلئے؟
+کینسر
+کیوبا
+کیونکہ
+کیوں
+کیٹالان
+کیڑوں
+کیے
+کی۔
+کے
+کےبعد
+گئی
+گئی۔
+گئے
+گئے۔
+گا
+گا،
+گا؟
+گاؤں
+گالی
+گاڑی
+گاڑیوں
+گاہکوں
+گا۔
+گجرانوالہ
+گرم
+گرما
+گرمی
+گروہ
+گرین
+گزارتا
+گزر
+گزرگاہ
+گزرے
+گزشتہ
+گفتگو
+گل
+گلیاں
+گناہ
+گولیوں
+گویا
+گھبرا
+گھر
+گھسا
+گھنٹے
+گھی
+گی
+گیا
+گیانا
+گیا۔
+گیس
+گیمز
+گی۔
+گے
+گے؟
+گے۔
+ھا
+ہاؤس
+ہاتھ
+ہاتھوں
+ہاں
+ہتھیایا
+ہجوم
+ہر
+ہرا
+ہزار
+ہفتے
+ہلکی
+ہم
+ہمارا
+ہماری
+ہمارے
+ہمت
+ہمدردی
+ہمپٹن
+ہمیں
+ہمیںدونوں
+ہنڈا
+ہنگامہ
+ہنگامی
+ہنگری
+ہو
+ہو؟
+ہوئی
+ہوئیں
+ہوئیں۔
+ہوئے
+ہوا
+ہوائی
+ہوتا
+ہوتا۔
+ہوتی
+ہوتے
+ہوتے۔
+ہوسکتی
+ہونا
+ہونی
+ہونے
+ہوچکی۔
+ہوگئی
+ہوگئے
+ہوگی
+ہوگیا
+ہوں
+ہوں۔
+ہوں۔۔۔کیوں
+ہو۔
+ہپناٹزم
+ہی
+ہیمبرگ
+ہیں
+ہیں،
+ہیں؟
+ہیں۔
+ہے
+ہے،
+ہے؟
+ہےاظہر
+ہے۔
+ی
+یا
+یاد
+یش
+یقین
+یقینا
+یو
+یورپ
+یوم
+یونس
+یوں
+یٹری
+یکسر
+یہ
+یہاں
+یہودی
+یہی
+۔

preprocessor_config.json

@@ -4,6 +4,7 @@
   "feature_size": 1,
   "padding_side": "right",
   "padding_value": 0.0,
+  "processor_class": "Wav2Vec2ProcessorWithLM",
   "return_attention_mask": true,
   "sampling_rate": 16000
 }

special_tokens_map.json

@@ -1,22 +1 @@
-{
-  "additional_special_tokens": [
-    {
-      "content": "<s>",
-      "lstrip": false,
-      "normalized": true,
-      "rstrip": false,
-      "single_word": false
-    },
-    {
-      "content": "</s>",
-      "lstrip": false,
-      "normalized": true,
-      "rstrip": false,
-      "single_word": false
-    }
-  ],
-  "bos_token": "<s>",
-  "eos_token": "</s>",
-  "pad_token": "[PAD]",
-  "unk_token": "[UNK]"
-}
+{"bos_token": "<s>", "eos_token": "</s>", "unk_token": "[UNK]", "pad_token": "[PAD]", "additional_special_tokens": [{"content": "<s>", "single_word": false, "lstrip": false, "rstrip": false, "normalized": true}, {"content": "</s>", "single_word": false, "lstrip": false, "rstrip": false, "normalized": true}, {"content": "<s>", "single_word": false, "lstrip": false, "rstrip": false, "normalized": true}, {"content": "</s>", "single_word": false, "lstrip": false, "rstrip": false, "normalized": true}]}

tokenizer_config.json

@@ -1,12 +1 @@
-{
-  "bos_token": "<s>",
-  "do_lower_case": false,
-  "eos_token": "</s>",
-  "name_or_path": "./",
-  "pad_token": "[PAD]",
-  "replace_word_delimiter_char": " ",
-  "special_tokens_map_file": null,
-  "tokenizer_class": "Wav2Vec2CTCTokenizer",
-  "unk_token": "[UNK]",
-  "word_delimiter_token": "|"
-}
+{"unk_token": "[UNK]", "bos_token": "<s>", "eos_token": "</s>", "pad_token": "[PAD]", "do_lower_case": false, "word_delimiter_token": "|", "replace_word_delimiter_char": " ", "name_or_path": "BakhtUllah123/xlsr_ur_training", "special_tokens_map_file": null, "tokenizer_class": "Wav2Vec2CTCTokenizer", "processor_class": "Wav2Vec2ProcessorWithLM"}

vocab.json

@@ -1,75 +1 @@
-{
-  "!": 1,
-  "\"": 2,
-  "'": 3,
-  ",": 4,
-  "-": 5,
-  ":": 6,
-  "[PAD]": 72,
-  "[UNK]": 71,
-  "|": 0,
-  "،": 7,
-  "؟": 8,
-  "ء": 9,
-  "آ": 10,
-  "أ": 11,
-  "ؤ": 12,
-  "ئ": 13,
-  "ا": 14,
-  "ب": 15,
-  "ت": 16,
-  "ث": 17,
-  "ج": 18,
-  "ح": 19,
-  "خ": 20,
-  "د": 21,
-  "ذ": 22,
-  "ر": 23,
-  "ز": 24,
-  "س": 25,
-  "ش": 26,
-  "ص": 27,
-  "ض": 28,
-  "ط": 29,
-  "ظ": 30,
-  "ع": 31,
-  "غ": 32,
-  "ف": 33,
-  "ق": 34,
-  "ل": 35,
-  "م": 36,
-  "ن": 37,
-  "و": 38,
-  "ى": 39,
-  "ي": 40,
-  "ً": 41,
-  "َ": 42,
-  "ُ": 43,
-  "ِ": 44,
-  "ّ": 45,
-  "ٓ": 46,
-  "ٔ": 47,
-  "ٰ": 48,
-  "ٹ": 49,
-  "پ": 50,
-  "چ": 51,
-  "ڈ": 52,
-  "ڑ": 53,
-  "ژ": 54,
-  "ک": 55,
-  "گ": 56,
-  "ں": 57,
-  "ھ": 58,
-  "ہ": 59,
-  "ۂ": 60,
-  "ۃ": 61,
-  "ی": 62,
-  "ے": 63,
-  "ۓ": 64,
-  "۔": 65,
-  "‘": 66,
-  "’": 67,
-  "…": 68,
-  "ﷲ": 69,
-  "ﷺ": 70
-}
+{"!": 1, "\"": 2, "'": 3, ",": 4, "-": 5, ":": 6, "[PAD]": 72, "[UNK]": 71, "|": 0, "،": 7, "؟": 8, "ء": 9, "آ": 10, "أ": 11, "ؤ": 12, "ئ": 13, "ا": 14, "ب": 15, "ت": 16, "ث": 17, "ج": 18, "ح": 19, "خ": 20, "د": 21, "ذ": 22, "ر": 23, "ز": 24, "س": 25, "ش": 26, "ص": 27, "ض": 28, "ط": 29, "ظ": 30, "ع": 31, "غ": 32, "ف": 33, "ق": 34, "ل": 35, "م": 36, "ن": 37, "و": 38, "ى": 39, "ي": 40, "ً": 41, "َ": 42, "ُ": 43, "ِ": 44, "ّ": 45, "ٓ": 46, "ٔ": 47, "ٰ": 48, "ٹ": 49, "پ": 50, "چ": 51, "ڈ": 52, "ڑ": 53, "ژ": 54, "ک": 55, "گ": 56, "ں": 57, "ھ": 58, "ہ": 59, "ۂ": 60, "ۃ": 61, "ی": 62, "ے": 63, "ۓ": 64, "۔": 65, "‘": 66, "’": 67, "…": 68, "ﷲ": 69, "ﷺ": 70}