Commit
·
6e22353
1
Parent(s):
3537dbd
Update README.md
Browse files
README.md
CHANGED
@@ -101,29 +101,29 @@ Hard ACC:54.71
|
|
101 |
**系统提示不能为空!**
|
102 |
|
103 |
## MMLU:
|
104 |
-
STEM准确率:
|
105 |
|
106 |
-
|
107 |
|
108 |
-
|
109 |
|
110 |
-
|
111 |
|
112 |
-
|
113 |
|
114 |
## CEval(验证集):
|
115 |
-
STEM准确率:
|
116 |
|
117 |
-
社会科学准确率:
|
118 |
|
119 |
-
人文学科准确率:
|
120 |
|
121 |
-
|
122 |
|
123 |
-
困难准确率:
|
124 |
|
125 |
-
**平均准确率:
|
126 |
|
127 |
## GSM8K
|
128 |
|
129 |
-
**零样本准确率0.
|
|
|
101 |
**系统提示不能为空!**
|
102 |
|
103 |
## MMLU:
|
104 |
+
STEM准确率:56.83
|
105 |
|
106 |
+
人文学科准确率:58.79
|
107 |
|
108 |
+
其他准确率:70.04
|
109 |
|
110 |
+
社会学准确率:72.41
|
111 |
|
112 |
+
平均准确率:63.82 (优于/平于最好的 Mistral-7B 聊天格式的微调。)
|
113 |
|
114 |
## CEval(验证集):
|
115 |
+
STEM准确率:61.67
|
116 |
|
117 |
+
社会科学准确率:81.94
|
118 |
|
119 |
+
人文学科准确率:77.19
|
120 |
|
121 |
+
其他准确率:68.35
|
122 |
|
123 |
+
困难准确率:48.03
|
124 |
|
125 |
+
**平均准确率:70.27** (优于当前所有7B模型。)
|
126 |
|
127 |
## GSM8K
|
128 |
|
129 |
+
**零样本准确率0.5921152388172858** (优于WizardMath-7B和Qwen-7B)
|