good

app.py

@@ -2,6 +2,7 @@ import os
 import streamlit as st
 import transformers
 import torch
+import tokenizers
 from typing import List, Dict
 
 st.subheader('Эта демонстрация позволяет поэксперементировать с моделями, которые оценивают, насколько предлагаемый ответ подходит к контексту диалога.')
@@ -11,7 +12,7 @@ model_name = st.selectbox(
 )
 auth_token = os.environ.get('TOKEN') or True
 
-@st.cache(hash_funcs={transformers.Tokenizer: lambda tokenizer: hash(tokenizer.name_or_path)})
+@st.cache(hash_funcs={tokenizers.Tokenizer: lambda tokenizer: hash(tokenizer.name_or_path)})
 def load_model(model_name: str):
     with st.spinner('Loading models...'):
         tokenizer = transformers.AutoTokenizer.from_pretrained(model_name, use_auth_token=auth_token)