| { | |
| "additional_special_tokens": [ | |
| "[PAD_left_1]", | |
| "[PAD_left_2]", | |
| "[PAD_left_3]", | |
| "[PAD_left_4]", | |
| "[PAD_left_5]", | |
| "[PAD_left_6]", | |
| "[PAD_left_7]", | |
| "[PAD_left_8]", | |
| "[PAD_left_9]", | |
| "[PAD_left_10]", | |
| "[PAD_left_11]", | |
| "[PAD_left_12]", | |
| "[PAD_left_13]", | |
| "[PAD_left_14]", | |
| "[PAD_left_15]", | |
| "[PAD_left_16]", | |
| "[PAD_left_17]", | |
| "[PAD_left_18]", | |
| "[PAD_left_19]", | |
| "[PAD_left_20]", | |
| "[PAD_left_21]", | |
| "[PAD_left_22]", | |
| "[PAD_left_23]", | |
| "[PAD_left_24]", | |
| "[PAD_left_25]", | |
| "[PAD_left_26]", | |
| "[PAD_left_27]", | |
| "[PAD_left_28]", | |
| "[PAD_left_29]", | |
| "[PAD_left_30]", | |
| "[PAD_left_31]", | |
| "[PAD_left_32]", | |
| "[PAD_left_33]", | |
| "[PAD_left_34]", | |
| "[PAD_left_35]", | |
| "[PAD_left_36]", | |
| "[PAD_left_37]", | |
| "[PAD_left_38]", | |
| "[PAD_left_39]", | |
| "[PAD_left_40]", | |
| "[PAD_left_41]", | |
| "[PAD_left_42]", | |
| "[PAD_left_43]", | |
| "[PAD_left_44]", | |
| "[PAD_left_45]", | |
| "[PAD_left_46]", | |
| "[PAD_left_47]", | |
| "[PAD_left_48]", | |
| "[PAD_left_49]", | |
| "[PAD_left_50]", | |
| "[PAD_left_51]", | |
| "[PAD_left_52]", | |
| "[PAD_left_53]", | |
| "[PAD_left_54]", | |
| "[PAD_left_55]", | |
| "[PAD_left_56]", | |
| "[PAD_left_57]", | |
| "[PAD_left_58]", | |
| "[PAD_left_59]", | |
| "[PAD_left_60]", | |
| "[PAD_left_61]", | |
| "[PAD_left_62]", | |
| "[PAD_left_63]", | |
| "[PAD_left_64]", | |
| "[PAD_left_65]", | |
| "[PAD_left_66]", | |
| "[PAD_left_67]", | |
| "[PAD_left_68]", | |
| "[PAD_left_69]", | |
| "[PAD_left_70]", | |
| "[PAD_left_71]", | |
| "[PAD_left_72]", | |
| "[PAD_left_73]", | |
| "[PAD_left_74]", | |
| "[PAD_left_75]", | |
| "[PAD_left_76]", | |
| "[PAD_left_77]", | |
| "[PAD_left_78]", | |
| "[PAD_left_79]", | |
| "[PAD_left_80]", | |
| "[PAD_left_81]", | |
| "[PAD_left_82]", | |
| "[PAD_left_83]", | |
| "[PAD_left_84]", | |
| "[PAD_left_85]", | |
| "[PAD_left_86]", | |
| "[PAD_left_87]", | |
| "[PAD_left_88]", | |
| "[PAD_left_89]", | |
| "[PAD_left_90]" | |
| ], | |
| "bos_token": "<s>", | |
| "cls_token": "<s>", | |
| "eos_token": "</s>", | |
| "mask_token": { | |
| "content": "<mask>", | |
| "lstrip": true, | |
| "normalized": false, | |
| "rstrip": false, | |
| "single_word": false | |
| }, | |
| "pad_token": "<pad>", | |
| "sep_token": "</s>", | |
| "unk_token": "<unk>" | |
| } | |