Update README.md
Browse files
README.md
CHANGED
@@ -10,7 +10,7 @@ tags:
|
|
10 |
|
11 |
## CharLLaMa-35M
|
12 |
|
13 |
-
Это крошечная языковая модель, имеющая архитектуру LLaMa, с **посимвольной** токенизацией для всевозможных экспериментов, когда задача решается плохо из-за BPE токенизации на слова и их части:
|
14 |
|
15 |
1) генеративные спеллчекеры
|
16 |
2) классификация текста: замена ```TfidfVectorizer(analyzer='char')```, т.е. когда хорошо сработал бейзлайн на символьных n-граммах
|
|
|
10 |
|
11 |
## CharLLaMa-35M
|
12 |
|
13 |
+
Это крошечная языковая модель, имеющая [архитектуру LLaMa](https://arxiv.org/abs/2302.13971), с **посимвольной** токенизацией для всевозможных экспериментов, когда задача решается плохо из-за BPE токенизации на слова и их части:
|
14 |
|
15 |
1) генеративные спеллчекеры
|
16 |
2) классификация текста: замена ```TfidfVectorizer(analyzer='char')```, т.е. когда хорошо сработал бейзлайн на символьных n-граммах
|