{ | |
"cls_token": "[CLS]", | |
"mask_token": "[MASK]", | |
"unk_token": "[UNK]", | |
"tokenizer_class": "CLIPTokenizerRoberta", | |
"model_max_length": 77, | |
"use_fast": true, | |
"auto_map": { | |
"AutoTokenizer": [ | |
"clip_tokenizer_roberta.CLIPTokenizerRoberta", | |
null | |
] | |
} | |
} |