{ | |
"additional_special_tokens": [ | |
"<extra_id_0>", | |
"<extra_id_1>", | |
"<extra_id_2>", | |
"<extra_id_3>", | |
"<extra_id_4>", | |
"<extra_id_5>", | |
"<extra_id_6>", | |
"<extra_id_7>", | |
"<extra_id_8>", | |
"<extra_id_9>", | |
"<extra_id_10>", | |
"<extra_id_11>", | |
"<extra_id_12>", | |
"<extra_id_13>", | |
"<extra_id_14>", | |
"<extra_id_15>", | |
"<extra_id_16>", | |
"<extra_id_17>", | |
"<extra_id_18>", | |
"<extra_id_19>", | |
"<extra_id_20>", | |
"<extra_id_21>", | |
"<extra_id_22>", | |
"<extra_id_23>", | |
"<extra_id_24>", | |
"<extra_id_25>", | |
"<extra_id_26>", | |
"<extra_id_27>", | |
"<extra_id_28>", | |
"<extra_id_29>", | |
"<extra_id_30>", | |
"<extra_id_31>", | |
"<extra_id_32>", | |
"<extra_id_33>", | |
"<extra_id_34>", | |
"<extra_id_35>", | |
"<extra_id_36>", | |
"<extra_id_37>", | |
"<extra_id_38>", | |
"<extra_id_39>", | |
"<extra_id_40>", | |
"<extra_id_41>", | |
"<extra_id_42>", | |
"<extra_id_43>", | |
"<extra_id_44>", | |
"<extra_id_45>", | |
"<extra_id_46>", | |
"<extra_id_47>" | |
], | |
"eos_token": "</s>", | |
"pad_token": "<pad>", | |
"unk_token": "<unk>" | |
} | |