Commit
·
6e22353
1
Parent(s):
3537dbd
Update README.md
Browse files
README.md
CHANGED
|
@@ -101,29 +101,29 @@ Hard ACC:54.71
|
|
| 101 |
**系统提示不能为空!**
|
| 102 |
|
| 103 |
## MMLU:
|
| 104 |
-
STEM准确率:
|
| 105 |
|
| 106 |
-
|
| 107 |
|
| 108 |
-
|
| 109 |
|
| 110 |
-
|
| 111 |
|
| 112 |
-
|
| 113 |
|
| 114 |
## CEval(验证集):
|
| 115 |
-
STEM准确率:
|
| 116 |
|
| 117 |
-
社会科学准确率:
|
| 118 |
|
| 119 |
-
人文学科准确率:
|
| 120 |
|
| 121 |
-
|
| 122 |
|
| 123 |
-
困难准确率:
|
| 124 |
|
| 125 |
-
**平均准确率:
|
| 126 |
|
| 127 |
## GSM8K
|
| 128 |
|
| 129 |
-
**零样本准确率0.
|
|
|
|
| 101 |
**系统提示不能为空!**
|
| 102 |
|
| 103 |
## MMLU:
|
| 104 |
+
STEM准确率:56.83
|
| 105 |
|
| 106 |
+
人文学科准确率:58.79
|
| 107 |
|
| 108 |
+
其他准确率:70.04
|
| 109 |
|
| 110 |
+
社会学准确率:72.41
|
| 111 |
|
| 112 |
+
平均准确率:63.82 (优于/平于最好的 Mistral-7B 聊天格式的微调。)
|
| 113 |
|
| 114 |
## CEval(验证集):
|
| 115 |
+
STEM准确率:61.67
|
| 116 |
|
| 117 |
+
社会科学准确率:81.94
|
| 118 |
|
| 119 |
+
人文学科准确率:77.19
|
| 120 |
|
| 121 |
+
其他准确率:68.35
|
| 122 |
|
| 123 |
+
困难准确率:48.03
|
| 124 |
|
| 125 |
+
**平均准确率:70.27** (优于当前所有7B模型。)
|
| 126 |
|
| 127 |
## GSM8K
|
| 128 |
|
| 129 |
+
**零样本准确率0.5921152388172858** (优于WizardMath-7B和Qwen-7B)
|