{ "bos_token": "[BOS]", "eos_token": "[EOS]", "pad_token": "[PAD]", "unk_token": "[UNK]", "model_max_length": 40, "tokenizer_class": "CharTokenizer", "auto_map": { "AutoTokenizer": ["char_tokenizer.CharTokenizer", null] } }