为什么这个模型的tokens只有2000个,很多汉字没有显示

#1
by victor-zv - opened

使用hotwords提示token中找不到某些字,查看模型token文件,只有2000行,其他模型的token在6000行左右,为什么少这么多,怎么能恢复全的token?

Sign up or log in to comment