Upload azj-script_latin/tokens.txt with huggingface_hub

azj-script_latin/tokens.txt

@@ -0,0 +1,72 @@
+1 0
+t 1
+T 1
+6 2
+s 3
+S 3
+ç 4
+Ç 4
+  5
+ğ 6
+Ğ 6
+_ 7
+e 8
+E 8
+2 9
+ü 10
+Ü 10
+x 11
+X 11
+m 12
+M 12
+n 13
+N 13
+d 14
+D 14
+v 15
+V 15
+b 16
+B 16
+q 17
+Q 17
+z 18
+Z 18
+k 19
+K 19
+ö 20
+Ö 20
+0 21
+p 22
+P 22
+– 23
+g 24
+G 24
+j 25
+J 25
+a 26
+A 26
+i 27
+u 28
+U 28
+ş 29
+Ş 29
+c 30
+C 30
+l 31
+L 31
+ı 32
+4 33
+̇ 34
+o 35
+O 35
+ə 36
+Ə 36
+h 37
+H 37
+f 38
+F 38
+- 39
+r 40
+R 40
+y 41
+Y 41