callanwu commited on
Commit
688b33b
·
1 Parent(s): b96c1c5

add specialist-RAG

Browse files
Files changed (1) hide show
  1. rag_result.jsonl +1 -0
rag_result.jsonl CHANGED
@@ -7,3 +7,4 @@
7
  {"system": "wenxin", "ss_easy": 0.525, "ss_medium": 0.3, "ss_hard": 0.2833333333333333, "ms_easy": 0.2125, "ms_medium": 0.18571428571428572, "ms_hard": 0.3, "overall": 0.2897058823529412}
8
  {"system": "tongyi", "ss_easy": 0.4125, "ss_medium": 0.45, "ss_hard": 0.4166666666666667, "ms_easy": 0.4, "ms_medium": 0.4143333, "ms_hard": 0.3416666666666667, "overall": 0.4073}
9
  {"system": "kimi", "ss_easy": 0.775, "ss_medium": 0.4142857142857143, "ss_hard": 0.4083333333333333, "ms_easy": 0.2625, "ms_medium": 0.2642857142857143, "ms_hard": 0.225, "overall": 0.3735294117647059}
 
 
7
  {"system": "wenxin", "ss_easy": 0.525, "ss_medium": 0.3, "ss_hard": 0.2833333333333333, "ms_easy": 0.2125, "ms_medium": 0.18571428571428572, "ms_hard": 0.3, "overall": 0.2897058823529412}
8
  {"system": "tongyi", "ss_easy": 0.4125, "ss_medium": 0.45, "ss_hard": 0.4166666666666667, "ms_easy": 0.4, "ms_medium": 0.4143333, "ms_hard": 0.3416666666666667, "overall": 0.4073}
9
  {"system": "kimi", "ss_easy": 0.775, "ss_medium": 0.4142857142857143, "ss_hard": 0.4083333333333333, "ms_easy": 0.2625, "ms_medium": 0.2642857142857143, "ms_hard": 0.225, "overall": 0.3735294117647059}
10
+ {"system": "specialist-RAG", "ss_easy": 0.8125, "ss_medium": 0.8143, "ss_hard": 0.8167, "ms_easy": 0.825, "ms_medium": 0.7786, "ms_hard": 0.7167, "overall": 0.7912}