Update README.md
Browse files
README.md
CHANGED
@@ -3,10 +3,10 @@ license: apache-2.0
|
|
3 |
tags:
|
4 |
- Russian
|
5 |
---
|
6 |
-
Qwen
|
7 |
|
8 |
|
9 |
-
Модель Qwen
|
10 |
|
11 |
Чтобы использовать модель, необходимо назначить eos токен как <|im_end|>. Рабочий ноутбук на Kaggle: https://www.kaggle.com/code/defdet/smol-chatbot/notebook
|
12 |
|
|
|
3 |
tags:
|
4 |
- Russian
|
5 |
---
|
6 |
+
Qwen 0.5B chat by Alibaba, SFTuned on Saiga dataset. Finetuned with EasyDeL framework on v3-8 Google TPU, provided by TRC.
|
7 |
|
8 |
|
9 |
+
Модель Qwen 0.5B, дообученая на датасете Ильи Гусева. По моему краткому опыту общения с моделью, лучше чем Saiga-mistral. Не ошибается в падежах. Карточка модели будет дополнена после теста на Russian SuperGlue. Возможно, будет DPO
|
10 |
|
11 |
Чтобы использовать модель, необходимо назначить eos токен как <|im_end|>. Рабочий ноутбук на Kaggle: https://www.kaggle.com/code/defdet/smol-chatbot/notebook
|
12 |
|