Commit
•
aae5291
1
Parent(s):
d558c71
Update README.md
Browse files
README.md
CHANGED
|
@@ -1,3 +1,37 @@
|
|
| 1 |
---
|
| 2 |
-
license:
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 3 |
---
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 1 |
---
|
| 2 |
+
license: other
|
| 3 |
+
license_name: yi-license
|
| 4 |
+
license_link: LICENSE
|
| 5 |
+
widget:
|
| 6 |
+
- text: "你好! 你叫什么名字!"
|
| 7 |
+
output:
|
| 8 |
+
text: "你好，我的名字叫聚言，很高兴见到你。"
|
| 9 |
+
pipeline_tag: text-generation
|
| 10 |
---
|
| 11 |
+
|
| 12 |
+
# 模型介绍
|
| 13 |
+
|
| 14 |
+
- OrionStar-Yi-34B-Chat 是一款开源中英文Chat模型，由猎户星空基于Yi-34B开源模型、使用 __15W+__ 高质量语料微调而成。OrionStar-Yi-34B-Chat-Llama将OrionStar-Yi-34B-Chat转换为LLama格式直接进行加载而无需使用trust_remote_code=True。
|
| 15 |
+
|
| 16 |
+
- Yi系列模型是由零一万物团队开源的大模型，在多个权威的中文、英文及通用领域 benchmark
|
| 17 |
+
上取得不错的效果。今天我们推出的Orionstar-Yi-34B-Chat更进一步挖掘了Yi-34B的潜力。通过对大量高质量微调语料库的深度训练，Orionstar-Yi-34B-Chat在评估数据上表现出色，我们致力于将其打造成为ChatGPT领域中的杰出开源替代品！
|
| 18 |
+
|
| 19 |
+
- 我们微调的模型对学术研究完全开放，同时请大家遵守[协议](#协议)
|
| 20 |
+
和 [Yi License](https://github.com/01-ai/Yi/blob/main/MODEL_LICENSE_AGREEMENT.txt)
|
| 21 |
+
|
| 22 |
+
- 模型评估结果
|
| 23 |
+
|
| 24 |
+
我们使用[opencompass](https://opencompass.org.cn)对以下通用领域数据集进行了 5-shot
|
| 25 |
+
测试。其他模型评估结果取自[opencompass-leaderboard](https://opencompass.org.cn/leaderboard-llm)。
|
| 26 |
+
|
| 27 |
+
| | C-Eval | MMLU | CMMLU |
|
| 28 |
+
|---------------------------|-----------|--------|-----------|
|
| 29 |
+
| **GPT-4** | 69.9 | **83** | 71 |
|
| 30 |
+
| **ChatGPT** | 52.5 | 69.1 | 53.9 |
|
| 31 |
+
| **Claude-1** | 52 | 65.7 | - |
|
| 32 |
+
| **TigerBot-70B-Chat-V2** | 57.7 | 65.9 | 59.9 |
|
| 33 |
+
| **WeMix-LLaMA2-70B** | 55.2 | 71.3 | 56 |
|
| 34 |
+
| **LLaMA-2-70B-Chat** | 44.3 | 63.8 | 43.3 |
|
| 35 |
+
| **Qwen-14B-Chat** | 71.7 | 66.4 | 70 |
|
| 36 |
+
| **Baichuan2-13B-Chat** | 56.7 | 57 | 58.4 |
|
| 37 |
+
| **OrionStar-Yi-34B-Chat** | **77.71** | 78.32 | **73.52** |
|