gary109's picture
add tokenizer_config.json
18f3180
{"labels": [" ", "#", "1", "2", "3", "4", "5", "a", "b", "c", "d", "e", "f", "g", "\u2047", "", "<s>", "</s>"], "is_bpe": false}