Update README.md
Browse files
README.md
CHANGED
@@ -1,3 +1,3 @@
|
|
1 |
-
个人项目:https://github.com/jiahe7ay/MINI_LLM/tree/main中的预训练模型权重
|
2 |
基座是对qwen进行修改,参数量改为1.4b
|
3 |
训练数据为维基百科+baidu百科+天工数据集前20个文件,token数量约为8b
|
|
|
1 |
+
个人项目:https://github.com/jiahe7ay/MINI_LLM/tree/main 中的预训练模型权重
|
2 |
基座是对qwen进行修改,参数量改为1.4b
|
3 |
训练数据为维基百科+baidu百科+天工数据集前20个文件,token数量约为8b
|