patrickvonplaten commited on
Commit
0e87828
1 Parent(s): 1365444
This view is limited to 50 files because it contains too many changes.   See raw diff
create_vocab.py ADDED
@@ -0,0 +1,37 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ #!/usr/bin/env python3
2
+ import os
3
+ import json
4
+ folder_path = "./vocabs"
5
+
6
+ all_dict = {}
7
+
8
+ def parse_file(filename):
9
+ dictionary = {
10
+ "</s>": 2,
11
+ "<pad>": 0,
12
+ "<s>": 1,
13
+ "<unk>": 3,
14
+ }
15
+ value = 4
16
+
17
+ with open(filename, 'r') as file:
18
+ for line in file:
19
+ line = line.strip().split()
20
+ if line:
21
+ key = line[0]
22
+ dictionary[key] = value
23
+ value += 1
24
+
25
+ return dictionary
26
+
27
+ for filename in os.listdir(folder_path):
28
+ filepath = os.path.join(folder_path, filename)
29
+ lang = filename.split(".")[0]
30
+ if os.path.isfile(filepath):
31
+ all_dict[lang] = parse_file(filepath)
32
+
33
+
34
+ output_path = "vocab_1.json" # Replace "output.json" with the desired output file path
35
+
36
+ with open(output_path, 'w') as output_file:
37
+ json.dump(all_dict, output_file, indent=4, sort_keys=True)
download_vocabs.sh ADDED
@@ -0,0 +1,10 @@
 
 
 
 
 
 
 
 
 
 
 
1
+ #!/bin/bash
2
+ langs=(abi abk abp aca acd ace acf ach acn acr acu ade adh adj adx aeu afr agd agg agn agr agu agx aha ahk aia aka akb ake akp alj alp alt alz ame amf amh ami amk ann any aoz apb apr ara arl asa asg asm ast ata atb atg ati atq ava avn avu awa awb ayo ayr ayz azb azg azj-script_cyrillic azj-script_latin azz bak bam ban bao bas bav bba bbb bbc bbo bcc-script_arabic bcc-script_latin bcl bcw bdg bdh bdq bdu bdv beh bel bem ben bep bex bfa bfo bfy bfz bgc bgq bgr bgt bgw bha bht bhz bib bim bis biv bjr bjv bjw bjz bkd bkv blh blt blx blz bmq bmr bmu bmv bng bno bnp boa bod boj bom bor bos bov box bpr bps bqc bqi bqj bqp bre bru bsc bsq bss btd bts btt btx bud bul bus bvc bvz bwq bwu byr bzh bzi bzj caa cab cac-dialect_sanmateoixtatan cac-dialect_sansebastiancoatan cak-dialect_central cak-dialect_santamariadejesus cak-dialect_santodomingoxenacoj cak-dialect_southcentral cak-dialect_western cak-dialect_yepocapa cap car cas cat cax cbc cbi cbr cbs cbt cbu cbv cce cco cdj ceb ceg cek ces cfm cgc che chf chv chz cjo cjp cjs ckb cko ckt cla cle cly cme cmn-script_simplified cmo-script_khmer cmo-script_latin cmr cnh cni cnl cnt coe cof cok con cot cou cpa cpb cpu crh crk-script_latin crk-script_syllabics crn crq crs crt csk cso ctd ctg cto ctu cuc cui cuk cul cwa cwe cwt cya cym daa dah dan dar dbj dbq ddn ded des deu dga dgi dgk dgo dgr dhi did dig dik dip div djk dnj-dialect_blowowest dnj-dialect_gweetaawueast dnt dnw dop dos dsh dso dtp dts dug dwr dyi dyo dyu dzo eip eka ell emp enb eng enx epo ese ess est eus evn ewe eza fal fao far fas fij fin flr fmu fon fra frd fry ful gag-script_cyrillic gag-script_latin gai gam gau gbi gbk gbm gbo gde geb gej gil gjn gkn gld gle glg glk gmv gna gnd gng gof-script_latin gog gor gqr grc gri grn grt gso gub guc gud guh guj guk gum guo guq guu gux gvc gvl gwi gwr gym gyr had hag hak hap hat hau hay heb heh hif hig hil hin hlb hlt hne hnn hns hoc hoy hrv hsb hto hub hui hun hus-dialect_centralveracruz hus-dialect_westernpotosino huu huv hvn hwc hye hyw iba ibo icr idd ifa ifb ife ifk ifu ify ign ikk ilb ilo imo ina inb ind iou ipi iqw iri irk isl ita itl itv ixl-dialect_sangasparchajul ixl-dialect_sanjuancotzal ixl-dialect_santamarianebaj izr izz jac jam jav jbu jen jic jiv jmc jmd jpn jun juy jvn kaa kab kac kak kam kan kao kaq kat kay kaz kbo kbp kbq kbr kby kca kcg kdc kde kdh kdi kdj kdl kdn kdt kea kek ken keo ker key kez kfb kff-script_telugu kfw kfx khg khm khq kia kij kik kin kir kjb kje kjg kjh kki kkj kle klu klv klw kma kmd kml kmr-script_arabic kmr-script_cyrillic kmr-script_latin kmu knb kne knf knj knk kno kog kor kpq kps kpv kpy kpz kqe kqp kqr kqy krc kri krj krl krr krs kru ksb ksr kss ktb ktj kub kue kum kus kvn kvw kwd kwf kwi kxc kxf kxm kxv kyb kyc kyf kyg kyo kyq kyu kyz kzf lac laj lam lao las lat lav law lbj lbw lcp lee lef lem lew lex lgg lgl lhu lia lid lif lin lip lis lit lje ljp llg lln lme lnd lns lob lok lom lon loq lsi lsm ltz luc lug luo lwo lww lzz maa-dialect_sanantonio maa-dialect_sanjeronimo mad mag mah mai maj mak mal mam-dialect_central mam-dialect_northern mam-dialect_southern mam-dialect_western maq mar maw maz mbb mbc mbh mbj mbt mbu mbz mca mcb mcd mco mcp mcq mcu mda mdf mdv mdy med mee mej men meq met mev mfe mfh mfi mfk mfq mfy mfz mgd mge mgh mgo mhi mhr mhu mhx mhy mib mie mif mih mil mim min mio mip miq mit miy miz mjl mjv mkd mkl mkn mlg mlt mmg mnb mnf mnk mnw mnx moa mog mon mop mor mos mox moz mpg mpm mpp mpx mqb mqf mqj mqn mri mrw msy mtd mtj mto muh mup mur muv muy mvp mwq mwv mxb mxq mxt mxv mya myb myk myl myv myx myy mza mzi mzj mzk mzm mzw nab nag nan nas naw nca nch ncj ncl ncu ndj ndp ndv ndy ndz neb new nfa nfr nga ngl ngp ngu nhe nhi nhu nhw nhx nhy nia nij nim nin nko nlc nld nlg nlk nmz nnb nno nnq nnw noa nob nod nog not npi npl npy nso nst nsu ntm ntr nuj nus nuz nwb nxq nya nyf nyn nyo nyy nzi obo oci ojb-script_latin ojb-script_syllabics oku old omw onb ood orm ory oss ote otq ozm pab pad pag pam pan pao pap pau pbb pbc pbi pce pcm peg pez pib pil pir pis pjt pkb pls plw pmf pny poh-dialect_eastern poh-dialect_western poi pol por poy ppk pps prf prk prt pse pss ptu pui pus pwg pww pxm qub quc-dialect_central quc-dialect_east quc-dialect_north quf quh qul quw quy quz qvc qve qvh qvm qvn qvo qvs qvw qvz qwh qxh qxl qxn qxo qxr rah rai rap rav raw rej rel rgu rhg rif-script_arabic rif-script_latin ril rim rjs rkt rmc-script_cyrillic rmc-script_latin rmo rmy-script_cyrillic rmy-script_latin rng rnl roh-dialect_sursilv roh-dialect_vallader rol ron rop rro rub ruf rug run rus sab sag sah saj saq sas sat sba sbd sbl sbp sch sck sda sea seh ses sey sgb sgj sgw shi shk shn sho shp sid sig sil sja sjm sld slk slu slv sml smo sna snd sne snn snp snw som soy spa spp spy sqi sri srm srn srp-script_cyrillic srp-script_latin srx stn stp suc suk sun sur sus suv suz swe swh sxb sxn sya syl sza tac taj tam tao tap taq tat tav tbc tbg tbk tbl tby tbz tca tcc tcs tcz tdj ted tee tel tem teo ter tes tew tex tfr tgj tgk tgl tgo tgp tha thk thl tih tik tir tkr tlb tlj tly tmc tmf tna tng tnk tnn tnp tnr tnt tob toc toh tom tos tpi tpm tpp tpt trc tri trn trs tso tsz ttc tte ttq-script_tifinagh tue tuf tuk-script_arabic tuk-script_latin tuo tur tvw twb twe twu txa txq txu tye tzh-dialect_bachajon tzh-dialect_tenejapa tzj-dialect_eastern tzj-dialect_western tzo-dialect_chamula tzo-dialect_chenalho ubl ubu udm udu uig-script_arabic uig-script_cyrillic ukr umb unr upv ura urb urd-script_arabic urd-script_devanagari urd-script_latin urk urt ury usp uzb-script_cyrillic uzb-script_latin vag vid vie vif vmw vmy vot vun vut wal-script_ethiopic wal-script_latin wap war waw way wba wlo wlx wmw wob wol wsg wwa xal xdy xed xer xho xmm xnj xnr xog xon xrb xsb xsm xsr xsu xta xtd xte xtm xtn xua xuo yaa yad yal yam yao yas yat yaz yba ybb ycl ycn yea yka yli yor yre yua yue-script_traditional yuz yva zaa zab zac zad zae zai zam zao zaq zar zas zav zaw zca zga zim ziw zlm zmz zne zos zpc zpg zpi zpl zpm zpo zpt zpu zpz ztq zty zul zyb zyp zza)
3
+ link_format="https://dl.fbaipublicfiles.com/mms/asr/dict/mms1b_all/"
4
+ mkdir -p vocabs
5
+ cd vocabs
6
+ for lang in ${langs[@]}; do
7
+ link="${link_format}${lang}.txt"
8
+ echo "wget ${link}"
9
+ wget ${link}
10
+ done
vocab.json CHANGED
The diff for this file is too large to render. See raw diff
 
vocabs/abi.txt ADDED
@@ -0,0 +1,52 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 352102
2
+ n 196148
3
+ ɛ 156349
4
+ ɩ 103554
5
+ ʋ 91086
6
+ a 81933
7
+ ɔ 80967
8
+ k 49477
9
+ b 48993
10
+ e 48340
11
+ l 47460
12
+ m 45338
13
+ t 43740
14
+ u 43344
15
+ i 43317
16
+ f 31899
17
+ r 30943
18
+ p 29382
19
+ o 25618
20
+ y 25092
21
+ ε 21071
22
+ ί 19453
23
+ s 17456
24
+ έ 17074
25
+ w 16466
26
+ j 14560
27
+ d 13540
28
+ - 12321
29
+ ̂ 12117
30
+ ́ 10746
31
+ c 10568
32
+ g 10385
33
+ h 9408
34
+ ̌ 7508
35
+ í 7190
36
+ é 4217
37
+ á 3379
38
+ ê 2837
39
+ â 1548
40
+ î 1244
41
+ ó 1217
42
+ ě 735
43
+ ú 722
44
+ û 448
45
+ ǐ 188
46
+ ' 145
47
+ ǔ 91
48
+ ǒ 54
49
+ ǎ 45
50
+ ń 13
51
+ ḿ 8
52
+ ô 7
vocabs/abk.txt ADDED
@@ -0,0 +1,42 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ а 173639
2
+ | 112055
3
+ ы 59500
4
+ и 55920
5
+ ә 42995
6
+ р 37486
7
+ у 27925
8
+ н 27572
9
+ ь 24682
10
+ х 22888
11
+ з 22033
12
+ с 19821
13
+ ш 19542
14
+ л 19349
15
+ г 16736
16
+ е 16705
17
+ м 16438
18
+ т 15902
19
+ о 14017
20
+ д 13699
21
+ ҳ 13346
22
+ к 12788
23
+ ҭ 10865
24
+ б 10590
25
+ ԥ 9441
26
+ ц 9159
27
+ ҟ 8261
28
+ ҵ 7573
29
+ қ 7534
30
+ п 7042
31
+ ӡ 5574
32
+ ҩ 5439
33
+ ж 5327
34
+ ҿ 2995
35
+ ӷ 1960
36
+ ҽ 1793
37
+ ч 1557
38
+ - 1527
39
+ џ 1358
40
+ ҷ 1065
41
+ ф 670
42
+ в 566
vocabs/abp.txt ADDED
@@ -0,0 +1,32 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ a 414328
2
+ | 351050
3
+ n 220079
4
+ i 127079
5
+ o 106160
6
+ y 92604
7
+ h 78020
8
+ k 77759
9
+ t 75753
10
+ e 69017
11
+ l 68916
12
+ m 66725
13
+ g 59646
14
+ p 55181
15
+ b 47906
16
+ d 35222
17
+ u 28619
18
+ w 22662
19
+ s 12424
20
+ - 10606
21
+ j 6531
22
+ r 4512
23
+ ā 2626
24
+ c 2234
25
+ f 350
26
+ z 232
27
+ v 190
28
+ q 124
29
+ ō 120
30
+ x 34
31
+ ' 32
32
+ 6 6
vocabs/aca.txt ADDED
@@ -0,0 +1,34 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ a 73218
2
+ | 64220
3
+ i 52211
4
+ n 37226
5
+ á 29629
6
+ c 25509
7
+ e 23900
8
+ u 18700
9
+ l 18157
10
+ r 18011
11
+ w 12285
12
+ j 11317
13
+ s 10423
14
+ í 9994
15
+ m 9640
16
+ é 9473
17
+ o 8973
18
+ ' 8505
19
+ h 8203
20
+ t 8043
21
+ y 8013
22
+ b 7103
23
+ d 6504
24
+ ú 4699
25
+ q 3215
26
+ ó 2998
27
+ p 1217
28
+ — 681
29
+ g 562
30
+ f 249
31
+ z 156
32
+ v 150
33
+ x 17
34
+ ñ 13
vocabs/acd.txt ADDED
@@ -0,0 +1,27 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 251555
2
+ a 122073
3
+ ɛ 94651
4
+ n 71139
5
+ ɔ 68542
6
+ i 58307
7
+ o 52977
8
+ m 49602
9
+ y 49594
10
+ e 45882
11
+ u 37771
12
+ g 36641
13
+ s 36216
14
+ k 33589
15
+ b 32116
16
+ r 29425
17
+ l 25768
18
+ d 20220
19
+ w 16922
20
+ f 15463
21
+ - 11313
22
+ t 10711
23
+ p 9100
24
+ ' 7296
25
+ ŋ 4643
26
+ h 245
27
+ c 2
vocabs/ace.txt ADDED
@@ -0,0 +1,41 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 175419
2
+ a 153113
3
+ n 103726
4
+ e 96571
5
+ u 91933
6
+ g 46960
7
+ t 45174
8
+ h 41663
9
+ i 37425
10
+ k 36085
11
+ m 32258
12
+ b 31359
13
+ o 30534
14
+ y 29234
15
+ l 28404
16
+ r 22092
17
+ s 21756
18
+ p 18987
19
+ j 18472
20
+ d 17012
21
+ é 13634
22
+ w 6207
23
+ ô 5811
24
+ ë 5792
25
+ - 5707
26
+ c 2451
27
+ ö 845
28
+ á 751
29
+ ó 729
30
+ f 565
31
+ z 153
32
+ ' 24
33
+ q 20
34
+ ú 16
35
+ ` 10
36
+ 0 3
37
+ 6 3
38
+ 4 2
39
+ 3 2
40
+ 1 2
41
+ 2 1
vocabs/acf.txt ADDED
@@ -0,0 +1,32 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 181397
2
+ a 81190
3
+ n 68601
4
+ é 49072
5
+ i 48381
6
+ o 46143
7
+ s 30177
8
+ t 29609
9
+ k 29245
10
+ y 27599
11
+ p 27171
12
+ l 25509
13
+ w 24583
14
+ m 24094
15
+ è 22039
16
+ u 21549
17
+ d 14498
18
+ - 12276
19
+ e 11859
20
+ b 11413
21
+ v 9872
22
+ j 9752
23
+ ò 8592
24
+ z 8012
25
+ f 7257
26
+ ʼ 4612
27
+ h 3924
28
+ g 3427
29
+ c 3231
30
+ r 748
31
+ — 83
32
+ ' 9
vocabs/ach.txt ADDED
@@ -0,0 +1,27 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 145830
2
+ o 72309
3
+ a 59517
4
+ i 54533
5
+ e 48958
6
+ k 37543
7
+ n 36249
8
+ m 32262
9
+ w 23510
10
+ t 23311
11
+ u 23039
12
+ y 20144
13
+ l 19225
14
+ c 18712
15
+ d 15353
16
+ b 15036
17
+ g 14576
18
+ r 12832
19
+ p 12686
20
+ ŋ 11583
21
+ j 3372
22
+ - 1075
23
+ s 245
24
+ ' 54
25
+ v 45
26
+ f 35
27
+ h 1
vocabs/acn.txt ADDED
@@ -0,0 +1,36 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 380189
2
+ h 184965
3
+ a 180533
4
+ s 154590
5
+ n 138757
6
+ o 115898
7
+ y 115160
8
+ g 102846
9
+ i 92429
10
+ e 82883
11
+ u 80461
12
+ l 58440
13
+ m 56345
14
+ t 45429
15
+ d 42937
16
+ q 40307
17
+ k 39484
18
+ v 28602
19
+ j 17716
20
+ z 13507
21
+ b 12438
22
+ p 12238
23
+ c 12037
24
+ w 11080
25
+ x 7668
26
+ r 3735
27
+ - 218
28
+ f 54
29
+ 0 32
30
+ 4 24
31
+ 1 10
32
+ 6 8
33
+ — 4
34
+ 2 4
35
+ 3 2
36
+ 5 2
vocabs/acr.txt ADDED
@@ -0,0 +1,36 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 198029
2
+ a 118297
3
+ i 100626
4
+ ' 78320
5
+ k 62085
6
+ r 54009
7
+ u 47276
8
+ e 46044
9
+ j 36177
10
+ n 35364
11
+ o 34586
12
+ c 33074
13
+ l 32635
14
+ h 31119
15
+ t 27062
16
+ q 22260
17
+ w 20034
18
+ x 18360
19
+ m 18168
20
+ b 17381
21
+ s 15178
22
+ y 12600
23
+ p 10779
24
+ z 6178
25
+ d 4798
26
+ — 1202
27
+ ú 1035
28
+ g 772
29
+ á 698
30
+ é 334
31
+ ó 307
32
+ f 271
33
+ í 248
34
+ v 229
35
+ - 217
36
+ ñ 7
vocabs/acu.txt ADDED
@@ -0,0 +1,34 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ a 203260
2
+ | 139292
3
+ i 118390
4
+ n 94569
5
+ u 88367
6
+ t 74525
7
+ r 54212
8
+ m 52612
9
+ k 51135
10
+ s 48946
11
+ e 32013
12
+ h 25203
13
+ j 22549
14
+ c 20514
15
+ w 17668
16
+ y 15878
17
+ p 13927
18
+ g 7970
19
+ o 4721
20
+ í 2039
21
+ — 1807
22
+ ú 1589
23
+ d 1368
24
+ l 1284
25
+ é 1258
26
+ á 908
27
+ b 790
28
+ f 294
29
+ v 195
30
+ ó 159
31
+ z 131
32
+ q 86
33
+ x 15
34
+ ñ 2
vocabs/ade.txt ADDED
@@ -0,0 +1,39 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 205418
2
+ a 83827
3
+ â 73978
4
+ n 50856
5
+ e 41058
6
+ b 35805
7
+ g 35456
8
+ æ 34818
9
+ i 31233
10
+ t 30262
11
+ w 28085
12
+ ô 27352
13
+ y 26067
14
+ k 24793
15
+ o 24162
16
+ r 23715
17
+ l 20957
18
+ u 20782
19
+ d 20708
20
+ m 17914
21
+ f 16757
22
+ s 13491
23
+ û 11991
24
+ p 8955
25
+ à 7520
26
+ - 6968
27
+ è 3466
28
+ ã 3008
29
+ õ 2664
30
+ ù 1690
31
+ î 1646
32
+ å 702
33
+ ì 683
34
+ ü 625
35
+ ǹ 560
36
+ ò 191
37
+ h 145
38
+ ' 20
39
+ c 3
vocabs/adh.txt ADDED
@@ -0,0 +1,28 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 135387
2
+ o 89220
3
+ i 60743
4
+ a 59702
5
+ e 44416
6
+ n 39491
7
+ k 30392
8
+ m 29319
9
+ w 28043
10
+ r 25498
11
+ y 25421
12
+ h 18847
13
+ t 18256
14
+ d 17031
15
+ j 15397
16
+ g 14175
17
+ u 12091
18
+ l 11116
19
+ p 10957
20
+ c 10936
21
+ b 8178
22
+ ŋ 7767
23
+ s 4896
24
+ f 1418
25
+ ' 1047
26
+ z 249
27
+ v 124
28
+ - 4
vocabs/adj.txt ADDED
@@ -0,0 +1,45 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 192049
2
+ a 61817
3
+ e 54180
4
+ ɛ 48923
5
+ n 37327
6
+ m 36316
7
+ l 34042
8
+ k 34003
9
+ i 29533
10
+ ŋ 26202
11
+ ' 25888
12
+ s 25206
13
+ b 23899
14
+ o 21830
15
+ y 21042
16
+ w 18837
17
+ ɔ 17156
18
+ u 16232
19
+ r 15914
20
+ g 13735
21
+ c 11515
22
+ t 9780
23
+ d 8520
24
+ j 7276
25
+ f 6796
26
+ p 2824
27
+ - 2789
28
+ ó 1150
29
+ ́ 1003
30
+ í 754
31
+ ̀ 456
32
+ á 404
33
+ h 320
34
+ é 310
35
+ ì 307
36
+ ò 189
37
+ ú 156
38
+ à 149
39
+ ê 108
40
+ v 99
41
+ ù 74
42
+ ̂ 68
43
+ è 65
44
+ z 48
45
+ ô 1
vocabs/adx.txt ADDED
@@ -0,0 +1,57 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ ་ 443718
2
+ ས 130009
3
+ ི 103510
4
+ ད 99016
5
+ ག 85923
6
+ ོ 82111
7
+ ན 66712
8
+ ང 62946
9
+ བ 61911
10
+ མ 60782
11
+ ར 59062
12
+ ུ 53253
13
+ ེ 52335
14
+ ྱ 49650
15
+ འ 40876
16
+ ལ 37238
17
+ པ 35778
18
+ ཁ 22137
19
+ ཡ 21680
20
+ ཀ 19665
21
+ ྲ 16963
22
+ ཞ 15011
23
+ ཅ 14746
24
+ ཕ 10498
25
+ ྣ 10082
26
+ ཆ 9404
27
+ ྟ 9346
28
+ ཐ 9333
29
+ ཤ 8730
30
+ ྐ 8453
31
+ ཏ 7298
32
+ ཉ 7003
33
+ ྒ 6162
34
+ ཚ 5979
35
+ ཟ 5216
36
+ ཱ 4029
37
+ ླ 3567
38
+ ྡ 3357
39
+ ཙ 2392
40
+ ྨ 2363
41
+ ྤ 2258
42
+ ཇ 2128
43
+ ྗ 1896
44
+ ཛ 1688
45
+ ྔ 1591
46
+ ཨ 1471
47
+ ྩ 1199
48
+ ཧ 1138
49
+ ྙ 862
50
+ ྷ 718
51
+ ྦ 446
52
+ ྫ 401
53
+ ྕ 177
54
+ ྭ 144
55
+ ཝ 60
56
+ ཊ 6
57
+ ཪ 2
vocabs/aeu.txt ADDED
@@ -0,0 +1,24 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 508441
2
+ a 433955
3
+ l 275090
4
+ i 258235
5
+ q 252323
6
+ n 164476
7
+ e 138283
8
+ h 136196
9
+ o 121947
10
+ v 77889
11
+ g 64965
12
+ - 57215
13
+ u 52535
14
+ b 49408
15
+ m 48556
16
+ k 44891
17
+ t 41593
18
+ d 38337
19
+ y 34865
20
+ j 33201
21
+ s 32772
22
+ p 21127
23
+ c 4496
24
+ w 34
vocabs/afr.txt ADDED
@@ -0,0 +1,73 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 22961
2
+ e 19676
3
+ i 9317
4
+ a 8840
5
+ n 8757
6
+ s 7269
7
+ r 7160
8
+ o 6923
9
+ t 6554
10
+ d 6107
11
+ l 4470
12
+ g 3996
13
+ k 3537
14
+ m 2886
15
+ v 2460
16
+ u 2428
17
+ w 2010
18
+ p 1923
19
+ h 1908
20
+ b 1764
21
+ y 1065
22
+ f 963
23
+ ' 569
24
+ j 397
25
+ 0 250
26
+ c 214
27
+ - 186
28
+ 1 183
29
+ ë 171
30
+ ê 105
31
+ 2 103
32
+ 9 81
33
+ 3 71
34
+ 4 71
35
+ . 68
36
+ 5 68
37
+ 6 64
38
+ ‘ 61
39
+ 8 47
40
+ z 44
41
+ 7 37
42
+ x 25
43
+ ï 23
44
+ : 23
45
+ , 15
46
+ / 15
47
+ q 15
48
+ á 10
49
+ ’ 9
50
+ ” 8
51
+ ; 6
52
+ $ 5
53
+ % 5
54
+ ń 4
55
+ – 4
56
+ í 3
57
+ ¥ 3
58
+ ó 2
59
+ ϊ 2
60
+ + 2
61
+ & 2
62
+ [ 2
63
+ ] 2
64
+ ² 1
65
+ " 1
66
+ ö 1
67
+ ç 1
68
+ ł 1
69
+ £ 1
70
+ ° 1
71
+ ͦ 1
72
+ ú 1
73
+ é 1
vocabs/agd.txt ADDED
@@ -0,0 +1,29 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 195967
2
+ a 169398
3
+ n 143027
4
+ i 87368
5
+ m 57758
6
+ e 49200
7
+ o 44200
8
+ á 38115
9
+ r 35952
10
+ k 34439
11
+ t 33538
12
+ u 27132
13
+ y 26087
14
+ v 24838
15
+ s 24076
16
+ f 16309
17
+ b 15332
18
+ í 14732
19
+ é 13229
20
+ d 10514
21
+ p 9224
22
+ h 6570
23
+ ú 4649
24
+ ó 4445
25
+ ' 75
26
+ - 20
27
+ 0 2
28
+ 4 1
29
+ 3 1
vocabs/agg.txt ADDED
@@ -0,0 +1,32 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ a 8591
2
+ | 8306
3
+ ɨ 6610
4
+ o 5215
5
+ n 4675
6
+ m 4175
7
+ h 3377
8
+ r 3248
9
+ u 2820
10
+ d 2800
11
+ i 2621
12
+ b 2498
13
+ e 2473
14
+ s 2154
15
+ ü 1776
16
+ y 1589
17
+ f 1557
18
+ g 917
19
+ ŋ 720
20
+ k 688
21
+ w 568
22
+ p 534
23
+ t 441
24
+ - 348
25
+ 0 12
26
+ 1 7
27
+ 7 7
28
+ 2 4
29
+ 4 2
30
+ 5 1
31
+ 6 1
32
+ 3 1
vocabs/agn.txt ADDED
@@ -0,0 +1,39 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ a 192558
2
+ | 184179
3
+ n 132835
4
+ g 99032
5
+ i 79988
6
+ o 67600
7
+ t 54259
8
+ m 42975
9
+ d 29177
10
+ s 26320
11
+ l 24515
12
+ e 24430
13
+ p 24265
14
+ r 21236
15
+ k 16863
16
+ b 16802
17
+ y 13059
18
+ w 5239
19
+ - 5176
20
+ u 2292
21
+ j 2236
22
+ c 1172
23
+ h 530
24
+ f 169
25
+ z 95
26
+ v 85
27
+ q 76
28
+ ' 67
29
+ ā 64
30
+ ō 63
31
+ 0 21
32
+ x 15
33
+ 1 5
34
+ — 3
35
+ 6 3
36
+ ē 2
37
+ 5 1
38
+ 2 1
39
+ 7 1
vocabs/agr.txt ADDED
@@ -0,0 +1,37 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ a 179800
2
+ | 122441
3
+ i 96532
4
+ u 87623
5
+ n 70910
6
+ t 58912
7
+ k 52801
8
+ m 46128
9
+ j 40764
10
+ s 40264
11
+ e 36076
12
+ g 25925
13
+ h 25231
14
+ w 17964
15
+ d 16028
16
+ p 14637
17
+ c 14455
18
+ y 8434
19
+ í 6430
20
+ b 4672
21
+ r 2979
22
+ o 2797
23
+ á 2191
24
+ ú 2166
25
+ l 1450
26
+ — 1420
27
+ é 395
28
+ f 249
29
+ ' 205
30
+ v 196
31
+ z 152
32
+ ó 110
33
+ q 81
34
+ x 10
35
+ ñ 3
36
+ 2 1
37
+ 7 1
vocabs/agu.txt ADDED
@@ -0,0 +1,39 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 198660
2
+ n 90006
3
+ a 83046
4
+ i 80900
5
+ ꞌ 74469
6
+ t 73083
7
+ e 51358
8
+ c 45019
9
+ u 44513
10
+ y 42877
11
+ l 40738
12
+ j 33921
13
+ o 29739
14
+ z 28643
15
+ k 27138
16
+ s 21294
17
+ h 19422
18
+ b 17860
19
+ w 14666
20
+ x 13972
21
+ m 11533
22
+ r 10732
23
+ p 7927
24
+ q 7100
25
+ ẍ 3267
26
+ ú 1024
27
+ — 794
28
+ d 729
29
+ g 551
30
+ í 548
31
+ é 491
32
+ ' 336
33
+ á 315
34
+ ó 291
35
+ - 278
36
+ f 168
37
+ v 62
38
+ ñ 3
39
+ 6 3
vocabs/agx.txt ADDED
@@ -0,0 +1,33 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ а 10405
2
+ | 10201
3
+ и 5129
4
+ у 4100
5
+ н 3577
6
+ е 2936
7
+ р 2828
8
+ с 2741
9
+ г 2477
10
+ ь 2184
11
+ к 2184
12
+ д 1966
13
+ л 1934
14
+ х 1862
15
+ ӏ 1820
16
+ т 1642
17
+ в 1336
18
+ ъ 1295
19
+ й 1149
20
+ ч 1103
21
+ я 1058
22
+ м 842
23
+ б 767
24
+ п 732
25
+ ф 580
26
+ з 524
27
+ ш 479
28
+ э 242
29
+ ж 232
30
+ – 223
31
+ ц 135
32
+ ю 39
33
+ о 18
vocabs/aha.txt ADDED
@@ -0,0 +1,46 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 193764
2
+ ɩ 92304
3
+ n 80787
4
+ a 76542
5
+ ɛ 60015
6
+ m 58517
7
+ i 51853
8
+ l 51494
9
+ ɔ 49454
10
+ y 44780
11
+ b 33525
12
+ ʋ 32088
13
+ e 25477
14
+ w 24789
15
+ k 24460
16
+ u 20289
17
+ d 16017
18
+ s 15015
19
+ z 13639
20
+ o 10069
21
+ t 8503
22
+ h 8079
23
+ ̃ 6607
24
+ g 4763
25
+ v 4075
26
+ ɣ 3249
27
+ p 2762
28
+ f 2612
29
+ á 2527
30
+ ĩ 2153
31
+ ã 1888
32
+ ́ 1132
33
+ í 440
34
+ é 403
35
+ ũ 296
36
+ 0 165
37
+ ó 93
38
+ ' 89
39
+ ú 39
40
+ 1 22
41
+ 2 20
42
+ 5 14
43
+ 4 6
44
+ 6 2
45
+ 3 2
46
+ 7 2
vocabs/ahk.txt ADDED
@@ -0,0 +1,29 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 297016
2
+ a 152620
3
+ ˬ 103797
4
+ e 101172
5
+ h 75566
6
+ u 61011
7
+ - 54608
8
+ w 41693
9
+ m 39109
10
+ i 32747
11
+ ̭ 32124
12
+ n 31113
13
+ y 25956
14
+ ' 22779
15
+ l 22490
16
+ g 22387
17
+ d 20679
18
+ s 19081
19
+ k 19047
20
+ t 18840
21
+ o 18689
22
+ ˆ 14034
23
+ j 10583
24
+ b 8729
25
+ p 7505
26
+ z 7414
27
+ c 3744
28
+ ` 2
29
+ f 1
vocabs/aia.txt ADDED
@@ -0,0 +1,28 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ a 488397
2
+ | 359458
3
+ i 248648
4
+ ꞌ 171341
5
+ n 130829
6
+ o 117403
7
+ r 106132
8
+ u 103703
9
+ m 75112
10
+ h 70428
11
+ e 65844
12
+ s 45748
13
+ t 43437
14
+ g 38705
15
+ d 32322
16
+ w 22611
17
+ b 20253
18
+ k 7289
19
+ - 5484
20
+ j 5386
21
+ p 3894
22
+ l 3478
23
+ v 560
24
+ f 426
25
+ — 6
26
+ y 6
27
+ 6 6
28
+ c 4
vocabs/aka.txt ADDED
@@ -0,0 +1,31 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 387538
2
+ a 226094
3
+ n 195927
4
+ o 129155
5
+ e 110131
6
+ m 87542
7
+ ɛ 80178
8
+ i 72027
9
+ s 67773
10
+ ɔ 67186
11
+ y 56463
12
+ w 55100
13
+ u 45686
14
+ k 43474
15
+ r 39598
16
+ b 34180
17
+ d 33248
18
+ h 28072
19
+ t 25236
20
+ f 24693
21
+ p 16680
22
+ g 7613
23
+ l 2941
24
+ ' 2173
25
+ ʼ 1043
26
+ - 44
27
+ 1 2
28
+ 7 2
29
+ á 1
30
+ 3 1
31
+ 2 1
vocabs/akb.txt ADDED
@@ -0,0 +1,31 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 355075
2
+ a 346962
3
+ n 191272
4
+ i 140394
5
+ o 116633
6
+ u 89683
7
+ d 80447
8
+ g 77437
9
+ s 71592
10
+ h 71361
11
+ m 70993
12
+ t 68893
13
+ r 52658
14
+ e 43718
15
+ l 42110
16
+ k 39643
17
+ p 38022
18
+ b 32222
19
+ j 22797
20
+ - 4221
21
+ y 3273
22
+ ' 1304
23
+ c 1048
24
+ w 130
25
+ z 120
26
+ f 101
27
+ v 34
28
+ 0 26
29
+ 4 16
30
+ 1 8
31
+ 6 2
vocabs/ake.txt ADDED
@@ -0,0 +1,31 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 312650
2
+ a 205504
3
+ ' 146778
4
+ n 143568
5
+ e 114118
6
+ p 111810
7
+ ɨ 103522
8
+ i 101548
9
+ o 96568
10
+ t 83052
11
+ r 81458
12
+ k 77822
13
+ ʉ 73128
14
+ s 67254
15
+ u 66940
16
+ m 48864
17
+ y 40330
18
+ w 24956
19
+ 0 494
20
+ — 438
21
+ 1 360
22
+ 7 198
23
+ 2 162
24
+ 4 98
25
+ 5 94
26
+ 3 64
27
+ 6 44
28
+ 8 28
29
+ 9 26
30
+ – 16
31
+ - 2
vocabs/akp.txt ADDED
@@ -0,0 +1,34 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 312604
2
+ a 172759
3
+ i 114909
4
+ ɔ 106117
5
+ e 83907
6
+ m 71998
7
+ s 63780
8
+ ɛ 55556
9
+ o 54139
10
+ r 48796
11
+ n 48199
12
+ k 47599
13
+ u 40009
14
+ b 38654
15
+ t 35914
16
+ g 27333
17
+ l 26150
18
+ ̃ 23154
19
+ ɖ 19774
20
+ w 18825
21
+ y 17685
22
+ ɣ 17200
23
+ p 15260
24
+ d 12104
25
+ ã 11543
26
+ f 11434
27
+ z 7290
28
+ ũ 5420
29
+ ĩ 1251
30
+ - 1143
31
+ h 644
32
+ v 257
33
+ 6 6
34
+ ' 4
vocabs/alj.txt ADDED
@@ -0,0 +1,24 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ a 187253
2
+ | 151525
3
+ n 75055
4
+ i 65115
5
+ o 54783
6
+ g 48274
7
+ y 46215
8
+ k 43560
9
+ s 38030
10
+ t 28172
11
+ m 27904
12
+ p 25517
13
+ e 24662
14
+ b 23780
15
+ w 21129
16
+ l 18817
17
+ d 17345
18
+ r 11700
19
+ 0 10
20
+ 4 3
21
+ 1 1
22
+ 5 1
23
+ 3 1
24
+ ɩ 1
vocabs/alp.txt ADDED
@@ -0,0 +1,29 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 371947
2
+ e 324527
3
+ a 243744
4
+ i 179125
5
+ k 120589
6
+ l 107571
7
+ u 98265
8
+ t 89715
9
+ s 88391
10
+ m 81747
11
+ n 78127
12
+ o 74194
13
+ r 59805
14
+ b 41481
15
+ p 33113
16
+ h 18065
17
+ y 10663
18
+ w 8764
19
+ d 7140
20
+ j 6276
21
+ g 1672
22
+ f 188
23
+ c 184
24
+ - 38
25
+ ' 22
26
+ 0 12
27
+ 1 4
28
+ 4 4
29
+ 2 2
vocabs/alt.txt ADDED
@@ -0,0 +1,45 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 98742
2
+ а 65402
3
+ е 42149
4
+ р 38197
5
+ ы 36146
6
+ н 36053
7
+ л 31079
8
+ и 31043
9
+ к 28947
10
+ д 27723
11
+ о 26383
12
+ т 23065
13
+ у 21517
14
+ г 19115
15
+ б 17251
16
+ с 16220
17
+ й 14205
18
+ п 12571
19
+ ј 11582
20
+ ӱ 11254
21
+ ҥ 10557
22
+ м 9389
23
+ ч 7983
24
+ з 7127
25
+ ӧ 6739
26
+ ж 3972
27
+ ш 3839
28
+ э 3731
29
+ – 1881
30
+ - 1292
31
+ в 776
32
+ х 719
33
+ ф 434
34
+ я 361
35
+ ь 160
36
+ 1 14
37
+ 2 13
38
+ ц 9
39
+ ю 4
40
+ ÿ 4
41
+ 4 2
42
+ r 1
43
+ j 1
44
+ 6 1
45
+ 0 1
vocabs/alz.txt ADDED
@@ -0,0 +1,26 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 131613
2
+ a 56427
3
+ i 50778
4
+ e 50191
5
+ n 46112
6
+ u 43140
7
+ o 40701
8
+ m 37828
9
+ k 31529
10
+ g 26626
11
+ d 18942
12
+ w 18887
13
+ r 16584
14
+ t 13507
15
+ b 13174
16
+ c 11686
17
+ y 11066
18
+ l 10881
19
+ ' 9605
20
+ h 8325
21
+ p 7402
22
+ j 6751
23
+ s 3499
24
+ f 670
25
+ v 347
26
+ z 163
vocabs/ame.txt ADDED
@@ -0,0 +1,38 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ a 359877
2
+ | 305568
3
+ e 300657
4
+ t 208426
5
+ o 177576
6
+ h 176025
7
+ ñ 158577
8
+ ' 152791
9
+ r 131197
10
+ p 116307
11
+ n 97885
12
+ s 82508
13
+ m 81026
14
+ l 54744
15
+ c 48943
16
+ y 47812
17
+ k 33133
18
+ w 23616
19
+ x 15719
20
+ i 6433
21
+ j 4788
22
+ b 3353
23
+ u 2833
24
+ d 2611
25
+ ú 2229
26
+ — 2142
27
+ ë 1792
28
+ g 1382
29
+ é 794
30
+ í 498
31
+ f 472
32
+ v 358
33
+ á 342
34
+ ó 316
35
+ z 226
36
+ q 170
37
+ - 28
38
+ 2 2
vocabs/amf.txt ADDED
@@ -0,0 +1,27 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ a 322659
2
+ | 247100
3
+ n 148855
4
+ e 146771
5
+ i 124527
6
+ o 97340
7
+ s 75160
8
+ d 71880
9
+ k 68061
10
+ h 66967
11
+ m 61138
12
+ y 59545
13
+ t 52063
14
+ r 47073
15
+ b 40919
16
+ g 23982
17
+ w 21700
18
+ l 21157
19
+ u 16962
20
+ p 14338
21
+ q 10202
22
+ j 9272
23
+ c 7948
24
+ z 4978
25
+ v 4499
26
+ ' 2800
27
+ x 742
vocabs/amh.txt ADDED
@@ -0,0 +1,335 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 85715
2
+ ን 22176
3
+ በ 11256
4
+ ት 10395
5
+ የ 8670
6
+ ው 10849
7
+ ስ 9576
8
+ ር 10440
9
+ መ 7239
10
+ ል 8332
11
+ ም 12644
12
+ ች 5926
13
+ ይ 7267
14
+ አ 9765
15
+ ለ 9133
16
+ ተ 6544
17
+ እ 11473
18
+ ነ 7507
19
+ ያ 5215
20
+ ና 5732
21
+ ላ 5013
22
+ ከ 5275
23
+ ደ 5557
24
+ ድ 4511
25
+ ብ 4890
26
+ ማ 3266
27
+ ረ 2961
28
+ ግ 4963
29
+ ገ 4498
30
+ ወ 4130
31
+ ታ 3547
32
+ ራ 2968
33
+ ሰ 4459
34
+ ጥ 1832
35
+ ሚ 2132
36
+ ክ 2491
37
+ ባ 2662
38
+ ዎ 955
39
+ ቀ 2619
40
+ ሉ 2613
41
+ ሪ 485
42
+ ጠ 1938
43
+ ካ 1230
44
+ ሳ 1903
45
+ ሆ 2602
46
+ ፍ 1648
47
+ ቅ 1955
48
+ ህ 4031
49
+ ዳ 1704
50
+ ዋ 1001
51
+ ጋ 1775
52
+ ቸ 2155
53
+ ቶ 1460
54
+ ኛ 1032
55
+ ሮ 865
56
+ ጣ 1328
57
+ ፈ 1991
58
+ ሊ 563
59
+ ሎ 937
60
+ ሁ 5544
61
+ 0 789
62
+ ሩ 1186
63
+ ቱ 1367
64
+ ቃ 1150
65
+ ዝ 833
66
+ ኖ 767
67
+ ሲ 556
68
+ ዘ 1373
69
+ ቢ 668
70
+ ፣ 639
71
+ ዊ 308
72
+ ዲ 1737
73
+ ጊ 783
74
+ 1 585
75
+ ጉ 376
76
+ ሞ 1243
77
+ ቦ 206
78
+ ዜ 763
79
+ ሌ 795
80
+ ኑ 899
81
+ ዛ 746
82
+ ጀ 393
83
+ ሽ 292
84
+ ዙ 554
85
+ ኮ 125
86
+ ሜ 169
87
+ ዓ 367
88
+ ዚ 2878
89
+ ቡ 645
90
+ ፊ 513
91
+ ዶ 329
92
+ ሃ 405
93
+ ጎ 231
94
+ ቤ 578
95
+ ቻ 516
96
+ ኒ 59
97
+ ዩ 346
98
+ ዕ 512
99
+ ጨ 313
100
+ ቹ 389
101
+ 2 365
102
+ ቁ 483
103
+ ፋ 684
104
+ ቆ 431
105
+ ዱ 783
106
+ ጅ 553
107
+ ኪ 145
108
+ ሬ 336
109
+ ሱ 2664
110
+ a 334
111
+ ቲ 205
112
+ ኤ 222
113
+ ቋ 113
114
+ ሙ 858
115
+ ኔ 632
116
+ ሶ 206
117
+ ፓ 307
118
+ ሻ 221
119
+ ፕ 4
120
+ ሀ 98
121
+ ኝ 855
122
+ ፖ 281
123
+ ኢ 1000
124
+ ጫ 120
125
+ ዮ 392
126
+ ቴ 169
127
+ ሕ 1289
128
+ ጭ 209
129
+ ሥ 1162
130
+ ጃ 115
131
+ ሴ 354
132
+ o 254
133
+ ኩ 240
134
+ ሄ 397
135
+ . 245
136
+ 9 245
137
+ ጓ 70
138
+ n 233
139
+ - 232
140
+ ኦ 38
141
+ 5 223
142
+ ሸ 222
143
+ e 222
144
+ ቂ 175
145
+ ፎ 162
146
+ 4 209
147
+ ኋ 769
148
+ ጡ 417
149
+ i 198
150
+ 3 196
151
+ ኘ 205
152
+ ፒ 189
153
+ ጽ 568
154
+ 6 181
155
+ r 178
156
+ 8 175
157
+ t 165
158
+ ፉ 291
159
+ ጦ 275
160
+ ኙ 114
161
+ s 162
162
+ l 158
163
+ ጂ 233
164
+ ዞ 128
165
+ ቪ 152
166
+ ቷ 56
167
+ ፅ 145
168
+ ጆ 269
169
+ ኃ 3
170
+ c 135
171
+ ሠ 399
172
+ u 129
173
+ ኬ 36
174
+ ዴ 210
175
+ ፃ 81
176
+ ኞ 269
177
+ 7 119
178
+ ኳ 185
179
+ m 111
180
+ p 109
181
+ ሂ 50
182
+ ሏ 81
183
+ h 97
184
+ ፀ 67
185
+ ። 95
186
+ ሐ 478
187
+ ቫ 89
188
+ ጸ 569
189
+ ሺ 55
190
+ ጤ 41
191
+ , 80
192
+ ፌ 59
193
+ ሯ 62
194
+ g 73
195
+ ፡ 72
196
+ ጻ 337
197
+ ዌ 13
198
+ ዥ 44
199
+ ጁ 154
200
+ d 62
201
+ ፐ 61
202
+ b 61
203
+ ቨ 59
204
+ ሹ 61
205
+ / 57
206
+ ሾ 96
207
+ ቧ 27
208
+ ቬ 52
209
+ ሟ 33
210
+ ቭ 51
211
+ ” 50
212
+ ፔ 1
213
+ ጪ 12
214
+ k 46
215
+ f 44
216
+ ቄ 103
217
+ ቺ 41
218
+ y 37
219
+ ፏ 8
220
+ ሷ 96
221
+ ጄ 64
222
+ ዬ 127
223
+ w 34
224
+ v 34
225
+ ሣ 381
226
+ ሦ 122
227
+ ጌ 816
228
+ ዣ 18
229
+ ቾ 17
230
+ ሔ 1155
231
+ ጩ 13
232
+ ሑ 11
233
+ ጧ 31
234
+ ኗ 24
235
+ j 26
236
+ ጮ 84
237
+ ዐ 599
238
+ ቼ 119
239
+ " 24
240
+ : 24
241
+ ኚ 2
242
+ ዦ 25
243
+ ዷ 23
244
+ ፤ 20
245
+ ዢ 2
246
+ ዑ 10
247
+ ዉ 19
248
+ ኅ 116
249
+ ኣ 5
250
+ ፆ 3
251
+ ጾ 41
252
+ x 16
253
+ $ 16
254
+ ኡ 1
255
+ ጢ 364
256
+ ቮ 13
257
+ « 13
258
+ » 13
259
+ ፑ 3
260
+ ጹ 127
261
+ % 10
262
+ ዟ 10
263
+ z 9
264
+ ዡ 30
265
+ ጵ 43
266
+ — 7
267
+ ፁ 53
268
+ ጿ 3
269
+ ዪ 53
270
+ ? 6
271
+ ’ 6
272
+ ሼ 18
273
+ + 5
274
+ ፥ 5
275
+ ዒ 5
276
+ ° 5
277
+ ሿ 6
278
+ ዖ 85
279
+ ጐ 125
280
+ õ 4
281
+ – 4
282
+ ኸ 186
283
+ ; 4
284
+ ã 3
285
+ ¥ 3
286
+ ኺ 1
287
+ ጴ 147
288
+ ጳ 242
289
+ ኜ 26
290
+ ' 3
291
+ ጇ 12
292
+ ጺ 2
293
+ ‘ 2
294
+ ! 2
295
+ ² 2
296
+ ቿ 22
297
+ ኰ 47
298
+ ፗ 2
299
+ q 2
300
+ & 2
301
+ £ 2
302
+ ኟ 8
303
+ [ 1
304
+ ] 1
305
+ ፦ 1
306
+ ኀ 395
307
+ ቈ 221
308
+ ጒ 187
309
+ ኵ 138
310
+ ሓ 103
311
+ ቍ 102
312
+ ቊ 81
313
+ ሡ 63
314
+ ጲ 40
315
+ ጶ 31
316
+ ኹ 28
317
+ ኾ 24
318
+ ሤ 24
319
+ ጕ 21
320
+ ኽ 20
321
+ ኻ 16
322
+ ዔ 14
323
+ ጬ 9
324
+ ጼ 8
325
+ ኄ 5
326
+ ዤ 5
327
+ ኆ 4
328
+ ሖ 3
329
+ ዠ 3
330
+ ጯ 2
331
+ ጱ 2
332
+ ጰ 2
333
+ ሢ 1
334
+ ፄ 1
335
+ ሒ 1
vocabs/ami.txt ADDED
@@ -0,0 +1,25 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ a 404776
2
+ | 359705
3
+ o 165062
4
+ n 152245
5
+ i 151534
6
+ k 90606
7
+ t 81684
8
+ m 67663
9
+ y 57936
10
+ s 53970
11
+ r 51455
12
+ l 45476
13
+ w 41233
14
+ c 40804
15
+ p 39861
16
+ g 37542
17
+ d 28223
18
+ ' 26416
19
+ h 22898
20
+ e 19615
21
+ f 16727
22
+ u 1882
23
+ x 32
24
+ 0 2
25
+ - 2
vocabs/amk.txt ADDED
@@ -0,0 +1,34 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 368899
2
+ a 368764
3
+ i 259962
4
+ n 181102
5
+ e 156863
6
+ o 135717
7
+ r 106329
8
+ m 87646
9
+ t 85684
10
+ u 82160
11
+ w 73239
12
+ f 54695
13
+ s 53460
14
+ k 39374
15
+ d 35932
16
+ g 31921
17
+ h 29093
18
+ b 26197
19
+ y 24087
20
+ p 16614
21
+ l 13488
22
+ j 540
23
+ - 186
24
+ 0 176
25
+ z 138
26
+ ' 60
27
+ 1 52
28
+ 2 40
29
+ c 34
30
+ 4 24
31
+ 6 10
32
+ — 6
33
+ 7 4
34
+ 3 4
vocabs/ann.txt ADDED
@@ -0,0 +1,39 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 192613
2
+ e 120025
3
+ i 108020
4
+ a 68024
5
+ n 64403
6
+ k 64265
7
+ u 44790
8
+ m 42985
9
+ ọ 32712
10
+ b 31465
11
+ o 27606
12
+ t 24420
13
+ ̄ 23303
14
+ y 21207
15
+ g 19646
16
+ r 18788
17
+ w 18748
18
+ s 18372
19
+ j 15798
20
+ l 12822
21
+ p 11611
22
+ è 7436
23
+ ì 7279
24
+ h 5855
25
+ c 5700
26
+ f 4734
27
+ ò 3995
28
+ î 2854
29
+ d 2215
30
+ - 1329
31
+ ô 917
32
+ ǹ 824
33
+ ê 662
34
+ â 245
35
+ ̀ 98
36
+ à 38
37
+ ù 11
38
+ ' 4
39
+ û 1
vocabs/any.txt ADDED
@@ -0,0 +1,38 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 416653
2
+ n 279079
3
+ a 177605
4
+ ɛ 117170
5
+ ɔ 97248
6
+ ɩ 88418
7
+ m 87443
8
+ l 69526
9
+ ʋ 55780
10
+ k 54205
11
+ b 51059
12
+ ' 49814
13
+ i 49712
14
+ y 49223
15
+ s 42636
16
+ ́ 40105
17
+ u 39676
18
+ e 36535
19
+ w 25312
20
+ t 23376
21
+ f 16323
22
+ d 15464
23
+ z 13803
24
+ h 13020
25
+ o 11810
26
+ g 10918
27
+ p 8961
28
+ - 8920
29
+ j 8628
30
+ á 4670
31
+ c 4383
32
+ ̂ 3123
33
+ â 2004
34
+ v 1601
35
+ ú 723
36
+ í 719
37
+ é 534
38
+ ó 74
vocabs/aoz.txt ADDED
@@ -0,0 +1,24 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 24892
2
+ a 18483
3
+ n 17772
4
+ e 9426
5
+ i 9363
6
+ u 5819
7
+ s 5496
8
+ o 5059
9
+ m 4924
10
+ t 4584
11
+ ' 4121
12
+ l 3869
13
+ k 3789
14
+ h 2044
15
+ f 1850
16
+ b 1763
17
+ p 944
18
+ y 721
19
+ g 642
20
+ - 405
21
+ j 290
22
+ r 280
23
+ d 138
24
+ w 25
vocabs/apb.txt ADDED
@@ -0,0 +1,37 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 236567
2
+ a 192718
3
+ e 115555
4
+ i 113203
5
+ o 93557
6
+ n 91965
7
+ u 64010
8
+ l 46471
9
+ m 41526
10
+ ꞌ 38468
11
+ k 32979
12
+ h 31400
13
+ t 30128
14
+ r 28780
15
+ g 25369
16
+ s 25105
17
+ w 11136
18
+ d 9503
19
+ p 8629
20
+ - 5473
21
+ j 2484
22
+ b 486
23
+ 1 234
24
+ v 145
25
+ 2 136
26
+ 3 66
27
+ f 61
28
+ 5 58
29
+ 4 58
30
+ 6 57
31
+ 8 51
32
+ 9 43
33
+ 0 36
34
+ 7 29
35
+ — 16
36
+ ' 8
37
+ z 3
vocabs/apr.txt ADDED
@@ -0,0 +1,30 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 296756
2
+ a 182433
3
+ n 125496
4
+ o 118601
5
+ i 112382
6
+ e 99178
7
+ t 74048
8
+ l 58552
9
+ g 57792
10
+ k 45318
11
+ m 42609
12
+ u 38838
13
+ y 37789
14
+ d 34085
15
+ p 29989
16
+ b 26195
17
+ r 21373
18
+ s 17513
19
+ w 6924
20
+ 0 91
21
+ 1 20
22
+ 4 16
23
+ 5 11
24
+ 6 8
25
+ 2 7
26
+ 7 6
27
+ 9 6
28
+ 3 5
29
+ ' 4
30
+ 8 1
vocabs/ara.txt ADDED
@@ -0,0 +1,117 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 753464
2
+ ا 414915
3
+ ل 366105
4
+ ي 243376
5
+ م 220617
6
+ ن 218976
7
+ و 200525
8
+ ت 107267
9
+ ر 115296
10
+ ب 117382
11
+ ة 49395
12
+ ع 103441
13
+ د 77178
14
+ ف 85639
15
+ س 85645
16
+ ك 100464
17
+ أ 111253
18
+ ق 62850
19
+ ه 126602
20
+ ح 59914
21
+ ج 42045
22
+ ط 21998
23
+ ى 30642
24
+ ش 25690
25
+ ص 21207
26
+ خ 28556
27
+ إ 35733
28
+ ث 16532
29
+ ض 20734
30
+ ذ 40384
31
+ ً 1092
32
+ ز 11052
33
+ غ 9208
34
+ ء 14858
35
+ ئ 11563
36
+ ّ 614
37
+ ظ 6501
38
+ ُ 340
39
+ 0 14
40
+ 1 255
41
+ ٍ 236
42
+ آ 6722
43
+ ، 179
44
+ ؤ 4278
45
+ 2 157
46
+ ِ 131
47
+ 9 108
48
+ 4 1
49
+ 5 6
50
+ 3 79
51
+ 6 74
52
+ َ 71
53
+ 8 70
54
+ ٌ 65
55
+ 7 62
56
+ - 168
57
+ . 41
58
+ a 4
59
+ / 30
60
+ " 28
61
+ n 7
62
+ o 7
63
+ e 6
64
+ : 23
65
+ s 1
66
+ t 10
67
+ ٠ 21
68
+ p 19
69
+ g 5
70
+ d 2
71
+ c 1
72
+ l 3
73
+ , 14
74
+ i 9
75
+ ١ 11
76
+ m 2
77
+ r 10
78
+ v 10
79
+ b 9
80
+ % 9
81
+ u 3
82
+ h 1
83
+ ؛ 6
84
+ ٩ 6
85
+ w 1
86
+ — 1
87
+ k 4
88
+ ـ 4
89
+ ٣ 4
90
+ x 3
91
+ f 3
92
+ ٨ 2
93
+ z 2
94
+ + 2
95
+ õ 2
96
+ j 2
97
+ ٧ 2
98
+ y 1
99
+ چ 1
100
+ ٢ 1
101
+ ٦ 1
102
+ ٪ 1
103
+ × 1
104
+ ٥ 1
105
+ ٰ 62
106
+ ی 60
107
+ ۖ 34
108
+ ک 21
109
+ ۚ 19
110
+ ۗ 6
111
+ ۛ 2
112
+ ھ 1
113
+ ' 344
114
+ ڨ 1
115
+ ۘ 1
116
+ ☭ 1
117
+ – 4
vocabs/arl.txt ADDED
@@ -0,0 +1,33 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ a 609449
2
+ i 403784
3
+ | 334799
4
+ u 300809
5
+ n 238087
6
+ j 166571
7
+ r 145956
8
+ o 140514
9
+ e 113539
10
+ c 102091
11
+ s 100301
12
+ t 93880
13
+ q 72373
14
+ y 64674
15
+ p 57373
16
+ h 48304
17
+ m 41083
18
+ l 3696
19
+ d 3163
20
+ b 2465
21
+ — 1998
22
+ é 1574
23
+ g 815
24
+ f 604
25
+ í 530
26
+ á 396
27
+ ó 390
28
+ v 388
29
+ z 278
30
+ ' 104
31
+ x 54
32
+ ú 44
33
+ k 10
vocabs/asa.txt ADDED
@@ -0,0 +1,27 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ | 210704
2
+ a 176039
3
+ i 120058
4
+ e 105093
5
+ n 87857
6
+ u 72130
7
+ k 71837
8
+ m 58953
9
+ o 48749
10
+ v 47614
11
+ h 44899
12
+ w 38857
13
+ t 36645
14
+ r 31987
15
+ s 28078
16
+ y 24358
17
+ g 23947
18
+ l 18614
19
+ d 12462
20
+ b 12169
21
+ j 11362
22
+ z 8742
23
+ c 7914
24
+ f 6769
25
+ p 2872
26
+ ' 1072
27
+ - 102