Update token_counter.py

token_counter.py

@@ -8,7 +8,7 @@ class TokenCounterTool(Tool):
     outputs = ["text"]
 
     def __call__(self, prompt: str):
-        token = os.environ['hf']
+       # token = os.environ['hf']
         tokenizer = AutoTokenizer.from_pretrained("lgaalves/gpt2-dolly")
         tokens = tokenizer(input_text)["input_ids"]
         return f"{len(tokens)}"