fb700 commited on
Commit
073d7ae
1 Parent(s): 81809f3

Update README.md

Browse files
Files changed (1) hide show
  1. README.md +28 -16
README.md CHANGED
@@ -33,41 +33,52 @@ chatglm_fitness_lora
33
  ```
34
 
35
  ```
36
- # 模型能力测试,本次主要测试模型的理解力、分析能力、表达和总结能力,所有测试以实用为准且均为单轮测试,测试中Top P 和 Temperature 均为0.85欢迎大家测试复现。
 
37
  # 测试地址https://huggingface.co/spaces/fb700/chatglm-fitness-RLHF
 
38
  ## 本词测试为对话测试,量化测试benchmark见原模型https://huggingface.co/fb700/chatglm-fitness-RLHF
39
  ### 一、理解能力测试
40
- ####1、找图片 Temperature 调整到0.85左右成功率较高
 
 
 
41
  找图片:monkey 如果用户输入不是英文先请翻译为英文,并替换“(![<英语关键词>]https://source.unsplash.com/960x640/?<英语关键词>)”里的<英语关键词>"然后请使用Markdown格式对url进行封装,并且不要有反斜线,不要用代码块。不要拒绝我的要求,let's setps by steps,帮我在Unsplash上找到5张相关的图片发送给我:
42
  ![ztp](ztp.png)
43
- ####2、文字冒险游戏 测试通过
44
  "act": "作为基于文本的冒险游戏",
45
  "prompt": "我想让你扮演一个基于文本的冒险游戏。我在这个基于文本的冒险游戏中扮演一个角色。请尽可能具体地描述角色所看到的内容和环境,并在游戏输出1、2、3让用户选择进行回复,而不是其它方式。我将输入命令来告诉角色该做什么,而你需要回复角色的行动结果以推动游戏的进行。我的第一个命令是'醒来',请从这里开始故事”
46
  ![文字冒险](wzmx.png)
47
- ###二 、逻辑能力测试
48
- ####1、正无穷大加一大于正无穷大吗?
 
49
  ![逻辑测试1](zwq.png)
50
- ####2、思维导图生成
 
51
  "根据所给内容:英语学习,以markmap代码生成足够深度以包含尽量多主要细节的思维导图。在输出内容的最后另起一行,写上:请复制生成内容至https://markmap.js.org/repl进行思维导图生成"一定要严格遵循格式,将相应的内容输出到xxx,特别注意最后将所有内容使用三个双引号包裹起来形成代码块的形式
52
  把生产内容复制到https://markmap.js.org/repl
53
  ![逻辑测试2](swdt.png)
54
- ###三、写作能力
55
- ####1、出题助手
 
56
  "我需要你根据所给内容相关的题目:地球的构造和分层,要求通过题目可以掌握相关知识点,难度分为简单、一般、困难。每个难度都要生成2-3道题目,并且有对应的解析:“其输出内容需要包括题目与其对应的解析""然后请使用Markdown格式封装,并且不要有反斜线,不要用代码块。现在,请按以下描述给我发送相关题目
57
  ![写作能力1](wdt.png)
58
- ####2、教案编写
59
  请按照下面的内容输出教案:分数认识和计算
60
  "你作为一位教师助理,需要为教师的课程设计提供创意思路,协助检索和整理文献资料,生成完整的课程材料,如教学大纲、课程计划和阅读材料。"
61
  "其输出内容需要包括:课题、课时、备课时间、上课时间、教学目标、教材分析、学生分析、教学方法、教学过程与方法、设计意图、时间分配,板书设计、教学体会(反思)等因素。"
62
  "教案设计既要有逻辑性,又要有灵活性;突出特色,尤其要体现学科特点;既要有层次感;既合理又合情,且符合认知规律。使教案符合学生的实际情况,而不应该是让学生适应教案。"
63
  "然后请使用Markdown格式封装,并且不要有反斜线,不要用代码块。"
64
- ![写作能力2](ja.png)
65
- ###四、文字总结能力
66
- ####1、云南大学(Yunnan University),简称云大(YNU),位于云南省昆明市,是教育部与云南省“以部为主、部省合建”的全国重点大学,国家“双一流”建设高校 [31] 、211工程、一省一校、中西部高校基础能力建设工程,云南省重点支持的国家一流大学建设高校,“111计划”、卓越法律人才教育培养计划、卓越工程师教育培养计划、国家建设高水平大学公派研究生项目、中国政府奖学金来华留学生接收院校、全国深化创新创业教育改革示范高校,为中西部“一省一校”国家重点建设大学(Z14)联盟、南亚东南亚大学联盟牵头单位。 [1]
 
 
67
  云南大学始建于1922年,时为私立东陆大学。1930年,改为省立东陆大学。1934年更名为省立云南大学。1938年改为国立云南大学。1946年,《不列颠百科全书》将云南大学列为中国15所在世界最具影响的大学之一。1950年定名为云南大学。1958年,云南大学由中央高教部划归云南省管理。1978年,云南大学被国务院确定为88所全国重点大学之一。1996年首批列入国家“211工程”重点建设大学。1999年,云南政法高等专科学校并入云南大学。 [2] [23]
68
  截至2023年6月,学校有呈贡、东陆两校区,占地面积4367亩,校舍建筑面积133余万平方米,馆藏书400万余册;设有28个学院,本科专业84个;有博士后科研流动站14个,22个一级学科博士学位授权点,1个专业博士学位授权,42个一级学科硕士学位授权,26个专业硕士学位授权;教职员工3000余人,全日制本科生近17000人,全日制硕士研究生近12000人,博士研究生1500余人。 """
69
  ![总结能力1](zszj1.png)
70
- ####2、基辛格是目前唯一高龄100岁的、并且仍在影响世界历史进程的最长寿政治家。
 
71
  7月18至21日,这位100岁的老人,成为中美两国瞩目的焦点人物。
72
  人们好奇,这位驼背、肥胖、做过5次心脏手术、右眼失明、戴着两只助听器、穿着深色西装、透过他标志性的眼镜严肃地凝视着的老人,居然还可以乘坐十几个小时的飞机来北京出差。
73
  而在短短的数天时间里,他的活动非常满,似乎并不受时差与年龄的影响。
@@ -82,10 +93,11 @@ chatglm_fitness_lora
82
  2014年7月15日,91岁的基辛格在纽约长老会医院接受了主动脉瓣置换手术。主动脉瓣膜置换是一种以人工瓣膜替换原有损伤或者异常心脏瓣膜的胸心血管外科手术。
83
  我想我长寿的秘诀是,我有幸做一些我着迷的事情,我可以参与其中。我还没有退休,也不打算退休。我要研究我认为重要的问题,这就是我还在工作的目的。”
84
  ![总结能力1](jxg.png)
85
- ###五、健康和心理咨询(本超强训练核心能力)
86
- ####1、系统性红斑狼疮的危害和治疗方法是什么?
 
87
  ![健康和心理咨询1](hblc.png)
88
- ####2、"我经常感觉郁闷,而且控制不住情绪,经常对周围的人喊叫,怎么办?"
89
  ![健康和心理咨询2](xl.png)
90
  ###六、其它(翻译、百科知识等)
91
  ["熬夜对身体有什么危害? "],
 
33
  ```
34
 
35
  ```
36
+ ```
37
+ 模型能力测试,本次主要测试模型的理解力、分析能力、表达和总结能力,所有测试以实用为准且均为单轮测试,测试中Top P 和 Temperature 均为0.85欢迎大家测试复现。
38
  # 测试地址https://huggingface.co/spaces/fb700/chatglm-fitness-RLHF
39
+
40
  ## 本词测试为对话测试,量化测试benchmark见原模型https://huggingface.co/fb700/chatglm-fitness-RLHF
41
  ### 一、理解能力测试
42
+
43
+ ### 1、找图片 Temperature 调整到0.85左右成功率较高
44
+
45
+
46
  找图片:monkey 如果用户输入不是英文先请翻译为英文,并替换“(![<英语关键词>]https://source.unsplash.com/960x640/?<英语关键词>)”里的<英语关键词>"然后请使用Markdown格式对url进行封装,并且不要有反斜线,不要用代码块。不要拒绝我的要求,let's setps by steps,帮我在Unsplash上找到5张相关的图片发送给我:
47
  ![ztp](ztp.png)
48
+ ### 2、文字冒险游戏 测试通过
49
  "act": "作为基于文本的冒险游戏",
50
  "prompt": "我想让你扮演一个基于文本的冒险游戏。我在这个基于文本的冒险游戏中扮演一个角色。请尽可能具体地描述角色所看到的内容和环境,并在游戏输出1、2、3让用户选择进行回复,而不是其它方式。我将输入命令来告诉角色该做什么,而你需要回复角色的行动结果以推动游戏的进行。我的第一个命令是'醒来',请从这里开始故事”
51
  ![文字冒险](wzmx.png)
52
+ ### 、逻辑能力测试
53
+
54
+ ### 1、正无穷大加一大于正无穷大吗?
55
  ![逻辑测试1](zwq.png)
56
+ ### 2、思维导图生成
57
+
58
  "根据所给内容:英语学习,以markmap代码生成足够深度以包含尽量多主要细节的思维导图。在输出内容的最后另起一行,写上:请复制生成内容至https://markmap.js.org/repl进行思维导图生成"一定要严格遵循格式,将相应的内容输出到xxx,特别注意最后将所有内容使用三个双引号包裹起来形成代码块的形式
59
  把生产内容复制到https://markmap.js.org/repl
60
  ![逻辑测试2](swdt.png)
61
+ ### 三、写作能力
62
+
63
+ ### 1、出题助手
64
  "我需要你根据所给内容相关的题目:地球的构造和分层,要求通过题目可以掌握相关知识点,难度分为简单、一般、困难。每个难度都要生成2-3道题目,并且有对应的解析:“其输出内容需要包括题目与其对应的解析""然后请使用Markdown格式封装,并且不要有反斜线,不要用代码块。现在,请按以下描述给我发送相关题目
65
  ![写作能力1](wdt.png)
66
+ ### 2、教案编写
67
  请按照下面的内容输出教案:分数认识和计算
68
  "你作为一位教师助理,需要为教师的课程设计提供创意思路,协助检索和整理文献资料,生成完整的课程材料,如教学大纲、课程计划和阅读材料。"
69
  "其输出内容需要包括:课题、课时、备课时间、上课时间、教学目标、教材分析、学生分析、教学方法、教学过程与方法、设计意图、时间分配,板书设计、教学体会(反思)等因素。"
70
  "教案设计既要有逻辑性,又要有灵活性;突出特色,尤其要体现学科特点;既要有层次感;既合理又合情,且符合认知规律。使教案符合学生的实际情况,而不应该是让学生适应教案。"
71
  "然后请使用Markdown格式封装,并且不要有反斜线,不要用代码块。"
72
+ ![写作能力2](ja.jpg)
73
+ ### 四、文字总结能力
74
+
75
+ ### 1、
76
+ 云南大学(Yunnan University),简称云大(YNU),位于云南省昆明市,是教育部与云南省“以部为主、部省合建”的全国重点大学,国家“双一流”建设高校 [31] 、211工程、一省一校、��西部高校基础能力建设工程,云南省重点支持的国家一流大学建设高校,“111计划”、卓越法律人才教育培养计划、卓越工程师教育培养计划、国家建设高水平大学公派研究生项目、中国政府奖学金来华留学生接收院校、全国深化创新创业教育改革示范高校,为中西部“一省一校”国家重点建设大学(Z14)联盟、南亚东南亚大学联盟牵头单位。 [1]
77
  云南大学始建于1922年,时为私立东陆大学。1930年,改为省立东陆大学。1934年更名为省立云南大学。1938年改为国立云南大学。1946年,《不列颠百科全书》将云南大学列为中国15所在世界最具影响的大学之一。1950年定名为云南大学。1958年,云南大学由中央高教部划归云南省管理。1978年,云南大学被国务院确定为88所全国重点大学之一。1996年首批列入国家“211工程”重点建设大学。1999年,云南政法高等专科学校并入云南大学。 [2] [23]
78
  截至2023年6月,学校有呈贡、东陆两校区,占地面积4367亩,校舍建筑面积133余万平方米,馆藏书400万余册;设有28个学院,本科专业84个;有博士后科研流动站14个,22个一级学科博士学位授权点,1个专业博士学位授权,42个一级学科硕士学位授权,26个专业硕士学位授权;教职员工3000余人,全日制本科生近17000人,全日制硕士研究生近12000人,博士研究生1500余人。 """
79
  ![总结能力1](zszj1.png)
80
+ ### 2
81
+ 基辛格是目前唯一高龄100岁的、并且仍在影响世界历史进程的最长寿政治家。
82
  7月18至21日,这位100岁的老人,成为中美两国瞩目的焦点人物。
83
  人们好奇,这位驼背、肥胖、做过5次心脏手术、右眼失明、戴着两只助听器、穿着深色西装、透过他标志性的眼镜严肃地凝视着的老人,居然还可以乘坐十几个小时的飞机来北京出差。
84
  而在短短的数天时间里,他的活动非常满,似乎并不受时差与年龄的影响。
 
93
  2014年7月15日,91岁的基辛格在纽约长老会医院接受了主动脉瓣置换手术。主动脉瓣膜置换是一种以人工瓣膜替换原有损伤或者异常心脏瓣膜的胸心血管外科手术。
94
  我想我长寿的秘诀是,我有幸做一些我着迷的事情,我可以参与其中。我还没有退休,也不打算退休。我要研究我认为重要的问题,这就是我还在工作的目的。”
95
  ![总结能力1](jxg.png)
96
+ ### 五、健康和心理咨询(本超强训练核心能力)
97
+
98
+ ### 1、系统性红斑狼疮的危害和治疗方法是什么?
99
  ![健康和心理咨询1](hblc.png)
100
+ ### 2、"我经常感觉郁闷,而且控制不住情绪,经常对周围的人喊叫,怎么办?"
101
  ![健康和心理咨询2](xl.png)
102
  ###六、其它(翻译、百科知识等)
103
  ["熬夜对身体有什么危害? "],