File size: 5,320 Bytes
3afd123 |
1 |
{"eos_token": "</s>", "unk_token": "<unk>", "pad_token": "<pad>", "mask_token": "<mask>", "additional_special_tokens": ["<Aa>", "<Ab>", "<Ac>", "<Ad>", "<Ae>", "<Af>", "<Ag>", "<Ah>", "<Ai>", "<Aj>", "<Ak>", "<Al>", "<Am>", "<An>", "<Ao>", "<Ap>", "<Aq>", "<Ar>", "<As>", "<At>", "<Au>", "<Av>", "<Aw>", "<Ax>", "<Ay>", "<Ba>", "<Bb>", "<Bc>", "<Bd>", "<Be>", "<Bf>", "<Bg>", "<Bh>", "<Bi>", "<Bj>", "<Bk>", "<Bl>", "<Bm>", "<Bn>", "<Bo>", "<Bp>", "<Bq>", "<Br>", "<Bs>", "<Bt>", "<Bu>", "<Bv>", "<Bw>", "<Bx>", "<By>", "<Ca>", "<Cb>", "<Cc>", "<Cd>", "<Ce>", "<Cf>", "<Cg>", "<Ch>", "<Ci>", "<Cj>", "<Ck>", "<Cl>", "<Cm>", "<Cn>", "<Co>", "<Cp>", "<Cq>", "<Cr>", "<Cs>", "<Ct>", "<Cu>", "<Cv>", "<Cw>", "<Cx>", "<Cy>", "<Da>", "<Db>", "<Dc>", "<Dd>", "<De>", "<Df>", "<Dg>", "<Dh>", "<Di>", "<Dj>", "<Dk>", "<Dl>", "<Dm>", "<Dn>", "<Do>", "<Dp>", "<Dq>", "<Dr>", "<Ds>", "<Dt>", "<Du>", "<Dv>", "<Dw>", "<Dx>", "<Dy>", "<Ea>", "<Eb>", "<Ec>", "<Ed>", "<Ee>", "<Ef>", "<Eg>", "<Eh>", "<Ei>", "<Ej>", "<Ek>", "<El>", "<Em>", "<En>", "<Eo>", "<Ep>", "<Eq>", "<Er>", "<Es>", "<Et>", "<Eu>", "<Ev>", "<Ew>", "<Ex>", "<Ey>", "<Fa>", "<Fb>", "<Fc>", "<Fd>", "<Fe>", "<Ff>", "<Fg>", "<Fh>", "<Fi>", "<Fj>", "<Fk>", "<Fl>", "<Fm>", "<Fn>", "<Fo>", "<Fp>", "<Fq>", "<Fr>", "<Fs>", "<Ft>", "<Fu>", "<Fv>", "<Fw>", "<Fx>", "<Fy>", "<Ga>", "<Gb>", "<Gc>", "<Gd>", "<Ge>", "<Gf>", "<Gg>", "<Gh>", "<Gi>", "<Gj>", "<Gk>", "<Gl>", "<Gm>", "<Gn>", "<Go>", "<Gp>", "<Gq>", "<Gr>", "<Gs>", "<Gt>", "<Gu>", "<Gv>", "<Gw>", "<Gx>", "<Gy>", "<Ha>", "<Hb>", "<Hc>", "<Hd>", "<He>", "<Hf>", "<Hg>", "<Hh>", "<Hi>", "<Hj>", "<Hk>", "<Hl>", "<Hm>", "<Hn>", "<Ho>", "<Hp>", "<Hq>", "<Hr>", "<Hs>", "<Ht>", "<Hu>", "<Hv>", "<Hw>", "<Hx>", "<Hy>", "<Ia>", "<Ib>", "<Ic>", "<Id>", "<Ie>", "<If>", "<Ig>", "<Ih>", "<Ii>", "<Ij>", "<Ik>", "<Il>", "<Im>", "<In>", "<Io>", "<Ip>", "<Iq>", "<Ir>", "<Is>", "<It>", "<Iu>", "<Iv>", "<Iw>", "<Ix>", "<Iy>", "<Ja>", "<Jb>", "<Jc>", "<Jd>", "<Je>", "<Jf>", "<Jg>", "<Jh>", "<Ji>", "<Jj>", "<Jk>", "<Jl>", "<Jm>", "<Jn>", "<Jo>", "<Jp>", "<Jq>", "<Jr>", "<Js>", "<Jt>", "<Ju>", "<Jv>", "<Jw>", "<Jx>", "<Jy>", "<Ka>", "<Kb>", "<Kc>", "<Kd>", "<Ke>", "<Kf>", "<Kg>", "<Kh>", "<Ki>", "<Kj>", "<Kk>", "<Kl>", "<Km>", "<Kn>", "<Ko>", "<Kp>", "<Kq>", "<Kr>", "<Ks>", "<Kt>", "<Ku>", "<Kv>", "<Kw>", "<Kx>", "<Ky>", "<La>", "<Lb>", "<Lc>", "<Ld>", "<Le>", "<Lf>", "<Lg>", "<Lh>", "<Li>", "<Lj>", "<Lk>", "<Ll>", "<Lm>", "<Ln>", "<Lo>", "<Lp>", "<Lq>", "<Lr>", "<Ls>", "<Lt>", "<Lu>", "<Lv>", "<Lw>", "<Lx>", "<Ly>", "<Ma>", "<Mb>", "<Mc>", "<Md>", "<Me>", "<Mf>", "<Mg>", "<Mh>", "<Mi>", "<Mj>", "<Mk>", "<Ml>", "<Mm>", "<Mn>", "<Mo>", "<Mp>", "<Mq>", "<Mr>", "<Ms>", "<Mt>", "<Mu>", "<Mv>", "<Mw>", "<Mx>", "<My>", "<Na>", "<Nb>", "<Nc>", "<Nd>", "<Ne>", "<Nf>", "<Ng>", "<Nh>", "<Ni>", "<Nj>", "<Nk>", "<Nl>", "<Nm>", "<Nn>", "<No>", "<Np>", "<Nq>", "<Nr>", "<Ns>", "<Nt>", "<Nu>", "<Nv>", "<Nw>", "<Nx>", "<Ny>", "<Oa>", "<Ob>", "<Oc>", "<Od>", "<Oe>", "<Of>", "<Og>", "<Oh>", "<Oi>", "<Oj>", "<Ok>", "<Ol>", "<Om>", "<On>", "<Oo>", "<Op>", "<Oq>", "<Or>", "<Os>", "<Ot>", "<Ou>", "<Ov>", "<Ow>", "<Ox>", "<Oy>", "<Pa>", "<Pb>", "<Pc>", "<Pd>", "<Pe>", "<Pf>", "<Pg>", "<Ph>", "<Pi>", "<Pj>", "<Pk>", "<Pl>", "<Pm>", "<Pn>", "<Po>", "<Pp>", "<Pq>", "<Pr>", "<Ps>", "<Pt>", "<Pu>", "<Pv>", "<Pw>", "<Px>", "<Py>", "<Qa>", "<Qb>", "<Qc>", "<Qd>", "<Qe>", "<Qf>", "<Qg>", "<Qh>", "<Qi>", "<Qj>", "<Qk>", "<Ql>", "<Qm>", "<Qn>", "<Qo>", "<Qp>", "<Qq>", "<Qr>", "<Qs>", "<Qt>", "<Qu>", "<Qv>", "<Qw>", "<Qx>", "<Qy>", "<Ra>", "<Rb>", "<Rc>", "<Rd>", "<Re>", "<Rf>", "<Rg>", "<Rh>", "<Ri>", "<Rj>", "<Rk>", "<Rl>", "<Rm>", "<Rn>", "<Ro>", "<Rp>", "<Rq>", "<Rr>", "<Rs>", "<Rt>", "<Ru>", "<Rv>", "<Rw>", "<Rx>", "<Ry>", "<Sa>", "<Sb>", "<Sc>", "<Sd>", "<Se>", "<Sf>", "<Sg>", "<Sh>", "<Si>", "<Sj>", "<Sk>", "<Sl>", "<Sm>", "<Sn>", "<So>", "<Sp>", "<Sq>", "<Sr>", "<Ss>", "<St>", "<Su>", "<Sv>", "<Sw>", "<Sx>", "<Sy>", "<Ta>", "<Tb>", "<Tc>", "<Td>", "<Te>", "<Tf>", "<Tg>", "<Th>", "<Ti>", "<Tj>", "<Tk>", "<Tl>", "<Tm>", "<Tn>", "<To>", "<Tp>", "<Tq>", "<Tr>", "<Ts>", "<Tt>", "<Tu>", "<Tv>", "<Tw>", "<Tx>", "<Ty>", "<Ua>", "<Ub>", "<Uc>", "<Ud>", "<Ue>", "<Uf>", "<Ug>", "<Uh>", "<Ui>", "<Uj>", "<Uk>", "<Ul>", "<Um>", "<Un>", "<Uo>", "<Up>", "<Uq>", "<Ur>", "<Us>", "<Ut>", "<Uu>", "<Uv>", "<Uw>", "<Ux>", "<Uy>", "<Va>", "<Vb>", "<Vc>", "<Vd>", "<Ve>", "<Vf>", "<Vg>", "<Vh>", "<Vi>", "<Vj>", "<Vk>", "<Vl>", "<Vm>", "<Vn>", "<Vo>", "<Vp>", "<Vq>", "<Vr>", "<Vs>", "<Vt>", "<Vu>", "<Vv>", "<Vw>", "<Vx>", "<Vy>", "<Wa>", "<Wb>", "<Wc>", "<Wd>", "<We>", "<Wf>", "<Wg>", "<Wh>", "<Wi>", "<Wj>", "<Wk>", "<Wl>", "<Wm>", "<Wn>", "<Wo>", "<Wp>", "<Wq>", "<Wr>", "<Ws>", "<Wt>", "<Wu>", "<Wv>", "<Ww>", "<Wx>", "<Wy>", "<Xa>", "<Xb>", "<Xc>", "<Xd>", "<Xe>", "<Xf>", "<Xg>", "<Xh>", "<Xi>", "<Xj>", "<Xk>", "<Xl>", "<Xm>", "<Xn>", "<Xo>", "<Xp>", "<Xq>", "<Xr>", "<Xs>", "<Xt>", "<Xu>", "<Xv>", "<Xw>", "<Xx>", "<Xy>", "<Ya>", "<Yb>", "<Yc>", "<Yd>", "<Ye>", "<Yf>", "<Yg>", "<Yh>", "<Yi>", "<Yj>", "<Yk>", "<Yl>", "<Ym>", "<Yn>", "<Yo>", "<Yp>", "<Yq>", "<Yr>", "<Ys>", "<Yt>", "<Yu>", "<Yv>", "<Yw>", "<Yx>", "<Yy>", "<Za>", "<Zb>", "<Zc>", "<Zd>", "<Ze>", "<Zf>", "<Zg>", "<Zh>", "<Zi>", "<Zj>", "<Zk>", "<Zl>", "<Zm>", "<Zn>", "<Zo>", "<Zp>", "<Zq>", "<Zr>", "<Zs>", "<Zt>", "<Zu>", "<Zv>", "<Zw>", "<Zx>", "<Zy>"]} |