tokenizer_config.json

{
  "model_type": "SquanchNasty AI Model",
  "tokenizer_type": "gpt-3.5-turbo",
  "max_length": 512
}