Update README.md
Browse files
README.md
CHANGED
|
@@ -12,7 +12,15 @@ pipeline_tag: text-generation
|
|
| 12 |
* 2023.12.14更新：发布微调后的Qwen-14b的权重，微调后的模型能适应32k长度（约4万汉字）的中英问答，在多文档问答任务上提升显著。
|
| 13 |
|
| 14 |
# LongBench测试结果
|
| 15 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 16 |
|
| 17 |
|
| 18 |
|
|
|
|
| 12 |
* 2023.12.14更新：发布微调后的Qwen-14b的权重，微调后的模型能适应32k长度（约4万汉字）的中英问答，在多文档问答任务上提升显著。
|
| 13 |
|
| 14 |
# LongBench测试结果
|
| 15 |
+
### LongBench的passage_retrieval_zh的评测结果
|
| 16 |
+
| 模型 | 得分 (acc) |
|
| 17 |
+
|---------------------------------------------|----------|
|
| 18 |
+
| Qwen-14b-chat | 0.525 |
|
| 19 |
+
| CausalLM-14b | 0.086 |
|
| 20 |
+
| CausalLM-14b-DPO | 0.06 |
|
| 21 |
+
| CausalLM-7b | 0.04 |
|
| 22 |
+
| LongAlpaca-7b-32k-chinese-v2 | 0.12 |
|
| 23 |
+
| **Qwen-14b-chat-yarn-32k** |**0.94**|
|
| 24 |
|
| 25 |
|
| 26 |
|