Workspace-Bench/Workspace-Bench huggingface dataset:
角色: Researcher
任务难度: 中等（步骤不超过10步且包含协同类型2）
任务: 我的桌面下有一篇对于The Discovery Gap: How Product Hunt Startups Disappear in LLM Discovery Querie论文的学习报告，但是做的较为粗糙，结合原论文内容，帮我总结优化生成一份更详细的学习报告，输出为优化学习报告.md文件
输出文件:
优化学习报告.md
评估标准:
优化学习报告.md文件是否成功生成，为markdown格式？
优化学习报告中是否包含研究背景与问题提出章节，明确阐述AI搜索时代的识别-推荐差距现象？
优化学习报告中是否列出了初创企业面临的三重劣势（训练数据截止问题、权威集中效应、搜索引擎增强模型不同规则）？
优化学习报告中是否完整列出了六个核心研究问题RQ1-RQ6？
优化学习报告中是否包含研究方法设计章节，说明样本量为112个Product Hunt初创企业，总查询数为2,240次？
优化学习报告中是否区分了直接查询和发现式查询两种查询类型？
优化学习报告中是否说明测试了ChatGPT (gpt-4o-mini)和Perplexity (sonar with web search)两种不同架构LLM？
优化学习报告中是否呈现了可见性差距核心数据：ChatGPT直接成功率99.4%、发现成功率3.32%、差距30:1，Perplexity直接成功率94.3%、发现成功率8.29%、差距11:1？
优化学习报告中是否正确阐述GEO优化发现：GEO综合评分与可见性无显著相关性，且解释了GEO是乘数而非催化剂？
优化学习报告中是否指出Perplexity中引用域相关性为r=+0.319，p<0.001，是最强预测因子？
优化学习报告中是否说明网络搜索增强模型发现率是知识截止模型的2.5倍？
优化学习报告中是否阐述清理后的Reddit数据结果：Reddit提及数r=+0.395，独特子版块数r=+0.405，均显著相关？
优化学习报告中是否讨论了可见性差距的三种驱动机制（时间墙、权威集中、查询架构）？
优化学习报告中是否列出了至少四条研究局限性？
优化学习报告中是否给出六条实践启示：不要指望AI发现、投资SEO基础、争取Product Hunt成功、构建真实社区存在、降低GEO优先级、目标网络搜索LLM？
优化学习报告中是否包含对未来研究的五个方向？
优化学习报告最终结论是否明确阐述核心观点：先构建传统基础，AI可见性自然会来，马车不能拉马？
优化学习报告相较原始学习报告，字数是否从约1400字增加到约3000字，内容更详实？
优化学习报告结构是否包含至少7个主要章节（研究背景、研究方法、核心发现、讨论、启示、未来研究、结论）？
优化学习报告中是否包含正确的论文信息（arXiv编号2601.00912v1，作者Amit Prakash Sharma）？
优化学习报告中所有核心数据和结论是否与原论文2601.00912v1一致，无错误解读？
考察能力: Workspace Exploration
Task-Providing File Utilization
Semantic Content Relations Understanding
Heterogeneous File Understanding
角色: Researcher
任务难度: 简单（步骤不超过5步且包含协同类型1）
任务: 我的桌面下有我论文的bibtex引用代码文件和bibtex_link.txt文件，帮我找到相关的论文链接，并输出一份完整的bibtex_link.txt
输出文件:
bibtex_link.txt
评估标准:
bibtex_link.txt是否包含全部8篇论文的条目和对应的链接？
FaithfulnessofCOT论文链接是否为https://proceedings.neurips.cc/paper_files/paper/2023/file/ed3fea9033a80fea1376299fa7863f4a-Paper-Conference.pdf？
wang2022selfconsistency论文链接是否为https://arxiv.org/abs/2203.11171？
wang2022selfconsistency是否同时包含pdf链接https://arxiv.org/pdf/2203.11171.pdf？
yao2022react论文链接是否为https://arxiv.org/abs/2210.03629？
yao2022react是否同时包含pdf链接https://arxiv.org/pdf/2210.03629.pdf？
bae2023earlyexit是否找到了匹配的论文链接https://aclanthology.org/2023.emnlp-main.772/？
bae2023earlyexit是否同时包含pdf链接https://aclanthology.org/2023.emnlp-main.772.pdf？
hsieh2023distillstepbystep论文链接是否为https://arxiv.org/abs/2305.02301？
hsieh2023distillstepbystep是否同时包含pdf链接https://arxiv.org/pdf/2305.02301.pdf？
ning2023skeleton论文链接是否为https://arxiv.org/abs/2307.15337？
ning2023skeleton是否同时包含pdf链接https://arxiv.org/pdf/2307.15337.pdf？
zeng2025asap论文链接是否为https://arxiv.org/abs/2508.05988？
zeng2025asap是否同时包含pdf链接https://arxiv.org/pdf/2508.05988.pdf？
shen2025codi论文链接是否为https://arxiv.org/abs/2502.21074？
shen2025codi是否同时包含pdf链接https://arxiv.org/pdf/2502.21074.pdf？
输出文件中每个论文条目是否分隔清晰，结构易读？
输出是否保留了原始bibtex条目信息以便对应？
是否所有arxiv编号都转换为了正确的abs链接格式？
是否通过搜索成功匹配了没有直接提供编号的bae2023earlyexit论文？
考察能力: Workspace Exploration
Task-Providing File Utilization
Lineage Tracing
Semantic Content Relations Understanding
角色: Researcher
任务难度: 中等（步骤不超过10步且包含协同类型2）
任务: 测试项目文件夹的python目录下有10个python文件，帮我总结并生成一份requirement.txt文件
输出文件:
requirement.txt
评估标准:
requirement.txt文件是否成功生成且不为空？
requirement.txt中是否包含beautifulsoup4依赖？
requirement.txt中是否包含click依赖？
requirement.txt中是否包含flask依赖？
requirement.txt中是否包含loguru依赖？
requirement.txt中是否包含matplotlib依赖？
requirement.txt中是否包含numpy依赖？
requirement.txt中是否包含pandas依赖？
requirement.txt中是否包含Pillow依赖？
requirement.txt中是否包含requests依赖？
requirement.txt中是否包含scikit-learn依赖？
requirement.txt中是否包含sqlalchemy依赖？
requirement.txt中是否包含torch依赖？
requirement.txt中是否包含tqdm依赖？
requirement.txt中是否总共包含13个第三方依赖包？
requirement.txt中每个依赖是否单独占一行，符合标准格式？
是否所有8个python文件中的第三方依赖都被提取出来了？
是否正确识别出Pillow包对应的导入名为PIL？
是否正确识别出beautifulsoup4包对应的导入名为bs4？
是否没有包含Python标准库（如time）作为依赖？
输出文件中是否没有重复的依赖包？
考察能力: Workspace Exploration
Semantic Content Relations Understanding
角色: Researcher
任务难度: 困难（步骤超过10步且包含协同类型3）
任务: 我的ST-Raptor项目文件夹下有5个以各自功能所简要命名的.py文件，我可能会通过不同参数多次运行，给出运行的终端指令模版，并列出完整参数列表，总结成说明，输出为ST-Raptor运行指令与参数说明.md文件
输出文件:
ST-Raptor运行指令与参数说明.md
评估标准:
输出文件ST-Raptor运行指令与参数说明.md是否包含了gradio_app.py、table_preprocess.py、embedding.py、clean_cache.py、ai_evaluate.py共5个.py文件的说明？
输出文件中为每个.py文件是否都提供了清晰的终端指令模版？
gradio_app.py的说明中是否包含server_name默认值0.0.0.0、server_port默认值7860、share默认值False这些参数信息？
gradio_app.py的说明中是否指明默认访问地址为http://localhost:7860，且退出时自动清理缓存？
table_preprocess.py中excel2tree函数是否列出了file、pkl_dir、convert_pkl、json_dir、convert_json、str_dir、convert_str、embedding_dir、convert_embedding等全部9个参数及其说明？
table_preprocess.py中是否指出需要修改源码main()函数中的dataset_dir变量来指定数据集路径？
table_preprocess.py是否说明了处理每个xlsx文件会输出pkl、json、txt、embedding.json四个文件？
embedding.py中是否说明了EmbeddingModel类的主要方法one_to_many_semilarity、topk_match、top1_match的参数要求？
embedding.py中是否指出value_list和embedding_cache_file必须指定其中一个？
clean_cache.py是否说明默认清理CACHE_DIR，并且可以通过取消注释清理其他缓存目录？
ai_evaluate.py中evaluate函数是否说明了input_file是JSONL格式、output_dir是输出目录？
ai_evaluate.py是否说明会输出Accuracy、BLEU、ROUGE-1/2/L、METEOR共5个评估指标？
ai_evaluate.py是否说明支持断点续评，已评估问题会跳过不重复处理？
输出文档中是否包含通用运行流程建议，给出清理缓存→预处理表格→启动交互式问答的完整顺序？
输出文件是否为标准Markdown格式，包含标题、目录和代码块？
是否文档中每个文件的说明都包含功能描述、指令模版、参数列表、使用示例四个部分？
文档是否正确指出所有脚本都需要在ST-Raptor项目根目录下运行？
考察能力: Workspace Exploration
Semantic Content Relations Understanding
角色: Researcher
任务难度: 简单（步骤不超过5步且包含协同类型1）
任务: 我从不同论文网站下载了5份论文的bibtex文件到我的桌面下，帮我整理一下合并成一份总的bibtex整理文档，输出为bibtex.txt文件
输出文件:
bibtex.txt
评估标准:
输出文件bibtex.txt是否存在且大小大于2000字节？
输出文件bibtex.txt是否包含来自bibtex(1).txt的bae2023earlyexit记录？
输出文件bibtex.txt是否包含来自bibtex(2).txt的hsieh2023distillstepbystep记录？
输出文件bibtex.txt是否包含来自bibtex(3).txt的wang2022selfconsistency记录？
输出文件bibtex.txt是否包含来自bibtex(4).txt的zeng2025asap记录？
输出文件bibtex.txt是否包含来自bibtex(4).txt的shen2025codi记录？
输出文件bibtex.txt是否包含来自bibtex(5).txt的FaithfulnessofCOT记录？
输出文件bibtex.txt总共是否包含恰好6条bibtex引用记录？
输出文件中是否保留了每个bibtex条目的完整信息包括title、author、year字段？
输出文件中是否正确保留了bae2023earlyentryear字段的值为2023？
输出文件中是否正确保留了wang2022selfconsistency的booktitle为International Conference on Learning Representations (ICLR)？
输出文件中zeng2025asap的eprint是否为2508.05988？
输出文件中shen2025codi的primaryClass是否为cs.CL？
输出文件中FaithfulnessofCOT的volume是否为36？
输出文件中FaithfulnessofCOT的year是否为2023？
输出文件中每条bibtex记录是否都以@开头并以}结尾，格式正确？
输出文件中是否不存在重复的bibtex条目？
输出文件中是否保留了原始的所有字段信息没有遗漏？
是否成功读取了全部5个输入txt文件的内容？
是否将所有内容完整合并到单个输出文件中，无内容丢失？
考察能力: Workspace Exploration
Result-Providing Files Utilization
角色: Researcher
任务难度: 简单（步骤不超过5步且包含协同类型1）
任务: 我的研究需要将不同figure一起观察，将桌面上图片目录下Suppl.Fig.2, panel相关文件合并为同一个文件，输出Suppl.Fig.2, panel.pptx文件
输出文件:
Suppl.Fig.2_ panel.pptx
评估标准:
输出文件是否为Suppl.Fig.2_ panel.pptx且文件大小大于10KB？
data目录中是否存在三个输入文件：49070d10837b1658_Suppl.Fig.2_ panel A.pptx（大小115262字节）、94ddd8a84ee5571a_Suppl.Fig.2_ panel C.pptx（大小128826字节）、1e7a8eec72a3e28c_Suppl.Fig.2_ panel D.pptx（大小119398字节）？
输入文件panel A是否正好包含1张幻灯片？
输入文件panel C是否正好包含1张幻灯片？
输入文件panel D是否正好包含1张幻灯片？
输出的合并文件中是否包含panel A的幻灯片？
输出的合并文件中是否包含panel C的幻灯片？
输出的合并文件中是否包含panel D的幻灯片？
合并后的PPT文件总幻灯片数是否等于3张（1+1+1）？
是否成功读取了三个输入PPT文件且没有发生读取错误？
是否将三个输入文件全部合并到一个输出文件中，没有遗漏任何一个输入文件？
合并过程是否保持了每个panel文件中原有的图片资源完整可用？
合并后PPT文件是否可以正常打开且格式没有损坏？
输出文件中幻灯片顺序是否按照panel A（第一张）、panel C（第二张）、panel D（第三张）的顺序排列？
合并后的PPT文件扩展名是否为.pptx且小写正确？
输出文件是否保留了原文件中所有文本内容和原有的格式设置？
输出文件中是否包含原文件中的所有图表元素和形状对象？
合并操作是否正确处理了PPT内部XML关系，没有导致幻灯片内容缺失？
输出文件大小是否大于30KB且小于500KB？
合并后的PPT文件第一张幻灯片是否来自panel A？
考察能力: Task-Providing File Utilization
Result-Providing Files Utilization
角色: Researcher
任务难度: 简单（步骤不超过5步且包含协同类型1）
任务: 我的桌面下project/ST-Raptor项目文件夹下有几个.py文件，当前版本代码已经较为完善，但还想尝试文件的进一步优化改进，所以帮我新建一个backup子文件夹，并将所有py文件备份到backup子文件夹中，并输出一份output.md说明文件结构变化
输出文件:
output.md
评估标准:
output.md 文件是否存在且可正常读取？
output.md 是否为 Markdown 格式文件，包含文件结构变化说明？
backup 子文件夹是否成功创建？
backup 文件夹中是否包含总共 6 个 .py 文件？
backup 文件夹中是否包含 1d0b253770d8fa15_table_preprocess.py 文件？
backup 文件夹中是否包含 37a2cc59594426a7_clean_cache.py 文件？
backup 文件夹中是否包含 851e272e81a480e1_ai_evaluate.py 文件？
backup 文件夹中是否包含 86ffbe39acf1d4cb_main.py 文件？
backup 文件夹中是否包含 cc4ebddb85bf4f99_gradio_app.py 文件？
backup 文件夹中是否包含 e98f0f4ff6a57f83_embedding.py 文件？
1d0b253770d8fa15_table_preprocess.py 文件大小是否为 12628 字节？
37a2cc59594426a7_clean_cache.py 文件大小是否为 1136 字节？
851e272e81a480e1_ai_evaluate.py 文件大小是否为 4367 字节？
86ffbe39acf1d4cb_main.py 文件大小是否为 8232 字节？
cc4ebddb85bf4f99_gradio_app.py 文件大小是否为 11578 字节？
e98f0f4ff6a57f83_embedding.py 文件大小是否为 20187 字节？
output.md 中是否明确说明共备份了 6 个 Python 文件？
output.md 中是否展示了原文件结构和新文件结构对比？
output.md 中是否包含备份位置和备份时间信息？
所有备份文件是否完整复制，无内容缺失？
是否保留了原项目文件夹下的源文件不被修改或移动？
文件结构变化说明是否清晰准确描述了新增 backup 文件夹的操作？
考察能力: Task-Providing File Utilization
Lineage Tracing
角色: Operations Manager
任务难度: 困难（步骤超过10步且包含协同类型3）
任务: 在/桌面/运营/活动/活动计划/目录下是我近期的事件计划，以markdown文件形式存储，整理一份表格文件event_plan_summary.xlsx到该目录下，以便我了解安排公司接下来的日程
输出文件:
event_plan_summary.xlsx
评估标准:
event_plan_summary.xlsx文件中是否包含总共60行事件数据，正好对应60个事件计划文件？
event_plan_summary.xlsx文件中是否包含17列数据，分别为event_number、event_name、date、location、expected_attendees、target_leads、objectives_count、pre_event_activities_count、agenda_items_count、event_manager、marketing_lead、technical_lead、logistics、created、last_updated、status、complete_sections？
event_plan_summary.xlsx中event_number列是否包含从1到60的连续整数，无缺失无重复且按顺序排列？
event_plan_summary.xlsx中所有60个事件名称是否均以"Product Launch Event "开头，后面正好跟对应事件编号？
event_plan_summary.xlsx中status列全部60行的值是否都为"Active Planning"，没有其他值？
event_plan_summary.xlsx中created列所有60行日期是否均为"2024-02-10"，last_updated列所有60行日期是否也均为"2024-02-10"？
event_plan_summary.xlsx中logistics列所有60行的值是否均为"Operations Team"，没有其他值？
event_plan_summary.xlsx中objectives_count列所有60行的值是否都准确提取为4？
event_plan_summary.xlsx中pre_event_activities_count列所有60行的值是否都准确提取为4？
event_plan_summary.xlsx中agenda_items_count列所有60行的值是否都准确提取为5？
event_plan_summary.xlsx中complete_sections列所有60行的值是否均为True，所有文件都包含完整的9个标准章节？
event_plan_summary.xlsx中事件编号1的预期参会人数是否为15879500，目标线索量是否为2526800，两个数值都要正确？
event_plan_summary.xlsx中事件编号25的预期参会人数是否为12500000，目标线索量是否为1500000？
event_plan_summary.xlsx中事件编号50的预期参会人数是否为12523500，目标线索量是否为822900，两个数值都要正确？
event_plan_summary.xlsx中事件编号60的预期参会人数是否为2510000，目标线索量是否为1985300，两个数值都要正确提取？
event_plan_summary.xlsx中所有事件的日期格式是否都正确为YYYY-MM-DD，单日期都补零为两位数？
event_plan_summary.xlsx中所有60个事件的位置是否都符合"Virtual / City {N}"格式，N正好对应事件编号？
event_plan_summary.xlsx中event_manager列每个事件是否均为"Team Lead {N}"，N正好对应事件编号？
event_plan_summary.xlsx中marketing_lead列每个事件是否均为"Marketing Manager {N}"，N正好对应事件编号？
event_plan_summary.xlsx中technical_lead列每个事件是否均为"Tech Lead {N}"，N正好对应事件编号？
event_plan_summary.xlsx文件是否可正常打开，所有数据格式正确，没有乱码和空值错误？
所有关键信息是否都正确提取：事件编号、名称、日期、位置、预期参会人数、目标线索量、三个负责人、后勤团队、创建更新日期、状态都有对应非空值？
考察能力: Workspace Exploration
Task-Providing File Utilization
Result-Providing Files Utilization
角色: Operations Manager
任务难度: 困难（步骤超过10步且包含协同类型3）
任务: 在我的自媒体目录下以json文件形式存储了我在社交媒体上发布的一些内容，帮我整理成表格文件post_summary.xlsx放到同目录下，看看这些投放内容的效果如何
输出文件:
post_summary.xlsx
评估标准:
post_summary.xlsx文件中是否包含共100条数据记录，对应处理了全部100个JSON文件？
post_summary.xlsx中的数据是否按post_id从小到大排序正确，POST_1在第一行，POST_100在最后一行？
post_summary.xlsx中是否包含20个数据列，涵盖了从JSON提取的所有关键字段？
表格中是否包含post_id、platform、content_type、caption、hashtags、post_date、scheduled、status、campaign_id这些基础信息列？
表格中是否包含engagement_likes、engagement_comments、engagement_shares、engagement_saves、engagement_engagement_rate这些互动指标列？
表格中是否包含audience_reach、audience_impressions、audience_followers_gained、audience_click_through_rate这些受众洞察指标列？
表格中是否包含media_image_url、media_video_url这些媒体资源列？
对于存在JSON语法错误（如content_type字段内换行）的文件是否能成功修正解析，不丢失内容？
所有json文件都被正确处理，post_summary.xlsx中没有缺失任何一条post记录？
platform列是否将数组转换为逗号分隔的字符串，例如["instagram"]转换为"instagram"？
hashtags列是否将所有标签数组转换为逗号分隔的字符串，保留全部标签信息？
post_summary.xlsx中第一条记录（POST_1）的campaign_id是否为CAMP_2，engagement_engagement_rate是否为"3.51%"？
post_summary.xlsx中POST_92的campaign_id是否为CAMP_13，engagement_engagement_rate是否为"5.99%"？
post_summary.xlsx中POST_93的campaign_id是否为CAMP_14，content_type修正后是否为"video image"？
POST_100的engagement_likes数值是否正确读取，保存在对应行的engagement_likes列中？
所有数值类型（likes, comments, shares, saves, reach, impressions, followers_gained）是否都以数字形式保存，能参与计算？
所有百分比类型数据（engagement_rate, click_through_rate）是否都保留了原有的百分比字符串格式？
布尔值scheduled字段是否正确转换为表格中的true/false文本值？
表格是否采用一行一帖的结构，每一行只包含一条社交媒体帖子的数据？
输出表格结构清晰，每个关键字段独占一列，能够方便筛选和分析投放效果？
考察能力: Workspace Exploration
Task-Providing File Utilization
Result-Providing Files Utilization
角色: Operations Manager
任务难度: 困难（步骤超过10步且包含协同类型3）
任务: 在用户操作目录下以csv文件形式存储了公司近期的一些用户运营数据，帮我整理成表格文件user_retention_summary.xlsx放到同目录下，便于区分和统计
输出文件:
user_retention_summary.xlsx
评估标准:
输出文件user_retention_summary.xlsx是否成功生成且文件大小大于100KB？
合并后的数据表是否包含总共80个CSV文件的数据，总记录数是否为4000行（不含表头）？
表格中是否包含source_file列，且每个单元格都能对应到原始CSV文件名（如1.csv、2.csv等格式）？
表格中是否包含user_id列，且所有user_id格式均为USR_XX_Y格式？
表格中是否包含cohort_date、signup_date、last_active这三个日期列？
表格中是否包含retention_days列，且所有数值均为整数类型可直接计算？
表格中是否包含engagement_score列，且数值范围在0-100之间？
表格中是否包含lifetime_value列，且所有数值均为可计算的纯数字？
表格中是否包含subscription_status列，且取值仅为active或inactive两种？
表格中是否包含churn_risk列，且取值仅为low或high两种？
总列数是否为10列（9个原始字段加1个source_file字段）？
第一行是否为正确的表头，包含user_id、cohort_date、signup_date、last_active、retention_days、engagement_score、lifetime_value、subscription_status、churn_risk、source_file？
retention_days列中是否包含0值（表示用户在注册当天即流失）？
engagement_score列中是否存在小于10的低分数值，也存在大于90的高分数值？
subscription_status列中active用户数量是否不为零，inactive用户数量是否也不为零？
churn_risk列中low风险用户数量是否不为零，high风险用户数量是否也不为零？
lifetime_value列中最大值是否超过300000，最小值是否小于1000？
是否所有行都有完整的数据，不包含空值或缺失值？
source_file列中是否覆盖了从1.csv到80.csv的所有原始文件编号？
文件格式是否为标准xlsx，能够被Excel或WPS表格正常打开和编辑？
考察能力: Workspace Exploration
Task-Providing File Utilization
Result-Providing Files Utilization
角色: Operations Manager
任务难度: 困难（步骤超过10步且包含协同类型3）
任务: 对于任务计划目录下即将到来2月份事件计划，我需要一个每日活动热度趋势图daily_activity_heat_trend.png，来直观感受活动热度变化，放到同目录下，以便我了解安排公司接下来的日程
输出文件:
daily_activity_heat_trend.png
评估标准:
输出文件daily_activity_heat_trend.png是否存在且为有效的PNG图片格式？
是否成功读取了data目录下全部60个event_plan markdown文件？
趋势图的x轴是否为2024年2月份的日期，y轴是否为活动热度（总预期参与人数）？
图表标题是否包含"Daily Activity Heat Trend"或类似正确表述2月份活动热度趋势的标题？
总共包含多少个唯一日期的数据？是否为19个唯一日期？
所有日期的总活动热度（总预期参与人数）是否为293,669,000？
2024-02-17的活动热度是否为28,094,500，且有2个活动？
2024-02-23的活动热度是否为27,302,000，且有2个活动？
2024-02-18的活动热度是否为5,800,000，且有2个活动？
2024-02-25的活动热度是否为6,667,000，且有2个活动？
每个日期是否都正确聚合了该日所有活动的预期参与人数总和？
所有日期是否按时间顺序从早到晚排序排列？
图表是否包含网格线，是否能清晰分辨每日热度的变化？
是否使用折线图加标记点展示每日热度变化趋势？
图像分辨率是否满足基本查看需求，文件大小是否合理？
日期标签是否正确旋转，保证可读性？
热度过高的日期（如28,094,500）在图表中位置是否正确显示在最高点？
热度较低的日期（如5,800,000）在图表中位置是否正确显示在最低点？
是否读取提取了每个markdown文件中的Date和Expected Attendees字段？
生成的图片文件扩展名是否为.png，符合要求？
考察能力: Workspace Exploration
Task-Providing File Utilization
Lineage Tracing
角色: Researcher
任务难度: 困难（步骤超过10步且包含协同类型3）
任务: 在管理信息目录下是我近期的一些会议数据，会议中记录了KPI完成率 (KPI)、营收目标达成率 (Revenue)、客户满意度 (CSAT)等关键指标，帮我整理成折线图meeting.png，同时总结分析一下公司的发展趋势综合成报告company_trend_analysis.md，保存在该目录下
输出文件:
company_trend_analysis.md
meeting.png
评估标准:
company_trend_analysis.md文件是否存在且大小大于1000字节？
meeting.png图片文件是否存在且大小大于100KB？
是否从所有50个会议文件中成功提取了数据，最终提取的数据记录数是否为50条？
提取的数据中，KPI完成率平均值是否精确为88.6%？
提取的数据中，营收目标达成率平均值是否精确为84.5%？
提取的数据中，客户满意度平均值是否精确为89.54分？
KPI完成率的最小值是否为80%，同时最大值是否为99%？
营收目标达成率的最小值是否为70%，同时最大值是否为99%？
客户满意度的最小值是否为80分，同时最大值是否为99分？
折线图meeting.png是否同时包含KPI完成率、营收目标达成率、客户满意度三条折线，且带有图例？
company_trend_analysis.md是否包含数据概述部分，并以表格形式列出了三项指标的平均值、最小值、最大值？
company_trend_analysis.md是否分别对KPI完成率、营收目标达成率、客户满意度三个指标单独进行了趋势分析？
KPI趋势分析中是否明确提到了月初高（90.7%）、月中低（86.6%）、月末回升（88.5%）的周期性波动结论？
营收趋势分析中是否提到了整体呈现缓慢下降趋势，最后10次会议平均达成率是否降至80.2%？
客户满意度分析中是否提到月初高（91.3分）、月中降（86.6分）、月末大幅回升（91.8分）的趋势特征？
综合评估部分是否总结了公司整体运营状况稳健，KPI和客户满意度表现优秀的结论？
综合评估部分是否明确指出营收目标达成率呈现下行趋势是当前最需要关注的核心问题？
分析报告的建议部分是否给出了至少三条针对性改进建议？
报告建议部分是否同时包含针对营收下滑、项目过程管理、客户满意度的具体建议？
分析报告是否建立了常态化指标监控的建议？
markdown文件是否使用了正确的标题层级（#、##、###），结构清晰可读？
按日期分段统计中，月初、月中、月末三个时间段的会议数量是否分别为19场、20场、11场？
考察能力: Workspace Exploration
Task-Providing File Utilization
Semantic Content Relations Understanding
角色: Operations Manager
任务难度: 中等（步骤不超过10步且包含协同类型2）
任务: 帮我找到我的合作伙伴信息储存文件夹，并将我的合作伙伴信息整理成表格文件partner_agreement_summary.xlsx放到同目录下，注意记录下关键差异信息
输出文件:
partner_agreement_summary.xlsx
评估标准:
partner_agreement_summary.xlsx文件中是否包含40个合作伙伴的数据记录？
partner_agreement_summary.xlsx表格是否按合作伙伴编号从1到40连续排序？
表格中是否包含'合作伙伴编号'、'合作伙伴公司名称'、'协议日期'、'协议期限(月)'、'推荐佣金比例(%)'、'最小订单价值($)'、'年度承诺金额($)'、'目标新客户数量'、'收入目标($)'、'联合活动参与人数'、'内容数量'、'签名状态'共12列？
Partner 1的推荐佣金比例是否为24%，最小订单价值是否为$2,526,000？
Partner 2的推荐佣金比例是否为38%，年度承诺金额是否为$177,030,000？
Partner 3的收入目标是否为$2,595,000,000，目标新客户是否为119,300？
Partner 5的年度承诺金额是否为$290,200,000，推荐佣金比例是否为21%？
Partner 10的联合活动参与人数是否为2,327,300，内容数量是否为140,930，推荐佣金比例是否为25%？
Partner 15的目标新客户数量是否为450,700，收入目标是否为$1,098,600,000？
Partner 20的年度承诺金额是否为$121,120,000，收入目标是否为$462,200,000，联合活动参与人数是否为421,300？
Partner 25的最小订单价值是否为$1,950,300，推荐佣金比例是否为12%？
Partner 30的推荐佣金比例是否为27%，目标新客户是否为1,234,000？
Partner 35的年度承诺金额是否为$189,030,000，内容数量是否为70,935？
Partner 40的推荐佣金比例是否为37%，最小订单价值是否为$42,900？
所有合作伙伴的协议日期是否均为2024-02-10，协议期限是否均为12个月？
所有合作伙伴的签名状态是否均为'Pending Signature'？
表格中合作伙伴公司名称是否格式均为'Partner_X_Company'，其中X为合作伙伴编号？
推荐佣金比例的取值范围是否在20%到40%之间，且每个合作伙伴佣金比例均不同？
最小订单价值是否均为整数，且分布在$40,000到$3,200,000范围之间？
年度承诺金额中，是否Partner 10的值为$62,490,000，低于一亿美元？
目标新客户数量的取值范围是否在10万到300万之间，且均为整数？
所有关键数值字段（佣金比例、订单值、承诺金额、客户目标、收入目标等）是否均为数字类型，无缺失值？
所有文本字段（合作伙伴公司名称、协议日期、签名状态）是否均为文本类型，无缺失值？
生成的表格是否清晰区分了每个合作伙伴的关键差异数据，体现了不同协议之间的数值差异？
考察能力: Workspace Exploration
Semantic Content Relations Understanding
角色: Operations Manager
任务难度: 困难（步骤超过10步且包含协同类型3）
任务: 在市场调研目录下以json文件形式存储了公司近期的一些市场研究数据，我需要一份表格文件market_analysis_summary.xlsx来辅助研究市场趋势，放到同目录下
输出文件:
market_analysis_summary.xlsx
评估标准:
输出文件market_analysis_summary.xlsx中是否包含共50行市场分析数据？
输出表格中是否包含analysis_id列，且所有ID从MKT_1到MKT_50按顺序排列？
输出表格中是否包含market列，所有值为Market_Segment_1到Market_Segment_50？
输出表格中是否包含analysis_date列，所有行的分析日期均为2024-02-10？
输出表格中是否包含market_size列，且MKT_1的market_size为318990B？
输出表格中是否包含market_growth_rate列，且MKT_48的market_growth_rate为7%？
输出表格中是否包含cagr列，MKT_1的cagr为11%，MKT_48的cagr为7%？
输出表格中是否包含competitor_1_name和competitor_1_market_share两列？
输出表格中MKT_1的competitor_1_name为Competitor_1_1且市场份额为13%？
输出表格中是否包含competitor_2_name和competitor_2_market_share两列？
输出表格中MKT_48的competitor_2_name为Competitor_48_2且市场份额为28%？
输出表格中是否包含company_size列，用于存放目标客户的公司规模？
输出表格中是否包含industry列，MKT_1和MKT_48的行业均为Technology？
输出表格中是否包含revenue_range列，包含每个细分市场的收入范围？
输出表格中是否包含market_trends列，包含分号分隔的四个市场趋势描述？
输出表格中每个market_trends是否都包含Digital transformation accelerating？
输出表格中是否包含market_opportunities列，包含分号分隔的四个市场机会？
输出表格中是否每个market_opportunities都包含AI-powered features？
输出表格中是否包含threats列，包含分号分隔的四个市场威胁？
输出表格中是否包含recommendations列，包含分号分隔的四条建议？
输出表格中列数是否为17列，符合扁平化处理后的结构？
输出表格中所有50条市场分析数据是否都没有缺失必填字段analysis_id、market、analysis_date？
考察能力: Workspace Exploration
Result-Providing Files Utilization
Semantic Content Relations Understanding
角色: Operations Manager
任务难度: 困难（步骤超过10步且包含协同类型3）
任务: 在活动计划目录下是公司最近的日程计划，我需要一份简要的日程计划表行程安排.md打印发到员工手中，以便他们能够快速知晓每日前往的地点，以日期-地点的简要格式呈现
输出文件:
行程安排.md
评估标准:
行程安排.md文件中是否包含总共60条活动记录？
行程安排.md是否采用表格形式展示日期和地点两列信息？
行程安排.md表头是否包含"日期"和"地点"两列？
是否正确提取了2024-02-1的两个活动：Virtual / City 28和Virtual / City 56？
是否正确提取了2024-02-2的三个活动：Virtual / City 1、Virtual / City 57、Virtual / City 29？
是否正确提取了2024-02-3的三个活动：Virtual / City 30、Virtual / City 58、Virtual / City 2？
是否正确提取了2024-02-4的三个活动：Virtual / City 59、Virtual / City 3、Virtual / City 31？
是否正确提取了2024-02-5的三个活动：Virtual / City 4、Virtual / City 32、Virtual / City 60？
是否正确提取了2024-02-22的两个活动：Virtual / City 21和Virtual / City 49？
所有地点信息是否保持"Virtual / City XX"格式，XX与event编号对应正确？
输出内容是否按照日期字典序排序，相同日期排列在一起？
行程安排.md是否包含标题文字"公司日程计划表"？
是否所有60个输入markdown文件都被提取了日期和地点信息，无遗漏？
2024-02-1这一天是否正好有2个活动安排？
2024-02-2这一天是否正好有3个活动安排？
2024-02-3这一天是否正好有3个活动安排？
2024-02-4这一天是否正好有3个活动安排？
2024-02-5这一天是否正好有3个活动安排？
2024-02-9这一天是否正好有2个活动安排？
最后一行记录是否为2024-02-9的Virtual / City 36？
第一行数据记录是否为2024-02-1的Virtual / City 28？
文件格式是否为标准markdown，可以直接打印阅读？
提取的地点信息是否全部来自每个event文件中Location字段，没有错误？
提取的日期信息是否全部来自每个event文件中Date字段，没有错误？
2024-02-10至2024-02-28这区间中每个日期是否都正好包含2个活动安排？
考察能力: Workspace Exploration
Lineage Tracing
角色: Operations Manager
任务难度: 困难（步骤超过10步且包含协同类型3）
任务: 我给公司安排了很多活动，帮我根据公司最近的日程计划（存在多个版本，编号大的为新的版本），按日期重新整理，以日期+版本号命名文件，整理后输出一份新老文件名对比的markdown文件output.md放到同目录下
输出文件:
output.md
评估标准:
output.md文件是否存在且包含完整的60条新老文件名对比记录？
output.md中的对比表是否包含原文件名、新文件名、活动日期、版本号、原编号这5列表头信息？
是否共处理了60个活动计划markdown文件，在output_cc目录中输出了60个重命名文件？
output_cc目录中包括output.md在内总文件数是否为61个？
所有重命名文件是否都严格采用YYYY-MM-DD_vX.md命名格式，其中X是阿拉伯数字版本号？
日期为2024-02-01的文件是否有2个版本，文件名分别是2024-02-01_v1.md和2024-02-01_v2.md？
日期为2024-02-02的文件是否有3个版本，文件名分别是2024-02-02_v1.md、2024-02-02_v2.md、2024-02-02_v3.md？
日期为2024-02-03的文件是否有3个版本，文件名分别是2024-02-03_v1.md、2024-02-03_v2.md、2024-02-03_v3.md？
日期为2024-02-04的文件是否有3个版本，文件名分别是2024-02-04_v1.md、2024-02-04_v2.md、2024-02-04_v3.md？
日期为2024-02-05的文件是否有3个版本，其中v3版本对应的原编号是否是60？
对于相同日期文件，版本号排序是否严格遵循原编号越大版本号越大的规则？
2024-02-01_v1.md对应的原编号是否是28，2024-02-01_v2.md对应的原编号是否是56？
2024-02-10_v1.md对应原编号9，2024-02-10_v2.md对应原编号37，版本号顺序是否正确？
重命名文件名称中的标准化日期是否与文件内容中提取的Date字段日期一致？
所有提取出的日期是否都被标准化为YYYY-MM-DD格式，单数字月日都补零为两位数字？
2024-02-05_v3.md文件内容中的Date是否为2024-02-5（标准化为文件名2024-02-05_v3.md）？
2024-02-25_v2.md文件内容中的Date是否与文件名日期一致？
output.md中记录的对比信息是否完整包含了所有60个输入文件？
output.md中所有记录是否都按日期升序排列，同一日期内按版本号升序排列？
是否从所有60个文件内容中都成功提取出了Date字段，没有遗漏？
是否按活动日期正确分组聚合了所有相同日期的活动文件？
整理后的文件中，不同活动日期总数是否正好是28个？
日期2024-02-24是否有2个版本，分别对应原编号23和51，命名为2024-02-24_v1.md和2024-02-24_v2.md？
日期2024-02-25是否有2个版本，分别对应原编号24和52？
日期2024-02-26是否有2个版本，分别对应原编号25和53？
日期2024-02-27是否有2个版本，分别对应原编号26和54？
日期2024-02-28是否有2个版本，分别对应原编号27和55？
output.md开头是否包含整理说明部分，清晰说明版本号规则和新文件名格式？
考察能力: Workspace Exploration
Lineage Tracing
角色: Researcher
任务难度: 困难（步骤超过10步且包含协同类型3）
任务: 我的现在在撰写论文，需要为论文添加一些参考文献，根据我桌面下的几篇论文，分析一下它们在文章中引用其他论文的情况，并生成一份论文参考文献引用指导文档，输出论文引用指导文档.md文件到桌面
输出文件:
论文引用指导文档.md
评估标准:
论文引用指导文档.md 是否为有效的markdown格式文件？
论文引用指导文档.md 中是否包含四篇论文的参考文献统计表格，其中四篇论文参考文献数量分别为5篇（2601.00912v1）、15篇（2601.00908v1）、40篇（2601.00920v2）、58篇（2601.00840v2）？
论文引用指导文档.md 中是否分析了论文长度与参考文献数量存在正相关关系这一结论？
论文引用指导文档.md 中是否总结了方括号编号制这一计算机学科最常用的文中引用方式？
论文引用指导文档.md 中是否明确说明了方括号编号格式的使用规范，包括编号位置和排序规则？
论文引用指导文档.md 中是否区分了arXiv预印本、期刊论文、会议论文、书籍四种不同类型文献的著录格式？
论文引用指导文档.md 中是否完整列出了引用常出现的四个位置：引言、文献综述、方法论、结果讨论？
论文引用指导文档.md 中是否给出不同长度论文的参考文献数量建议，其中短篇论文（10-20页）建议为5-15篇？
论文引用指导文档.md 中是否给出引用质量四条核心原则：优先引用经典工作、必须引用最新进展、平衡引用不同立场、避免过度自引？
论文引用指导文档.md 中是否说明了过度自引的比例建议：自引一般不超过总引用数的10%？
论文引用指导文档.md 中是否给出至少三条格式一致性检查要点？
论文引用指导文档.md 中是否列出至少五种常见引用错误需要作者避免？
论文引用指导文档.md 中是否给出了计算机学科arXiv风格论文推荐写作流程说明？
论文引用指导文档.md 中是否明确建议文中引用编号应当放置在标点符号之前？
论文引用指导文档.md 中是否建议参考文献列表按文中出现顺序进行编号？
论文引用指导文档.md 中是否提供了正确引用放置和错误引用放置的对比示例？
论文引用指导文档.md 中分析过程是否基于实际提取的四篇论文文本内容进行分析？
论文引用指导文档.md 是否包含清晰的一级标题、二级标题等markdown结构化格式？
论文引用指导文档.md 末尾是否提供了最终的参考文献引用检查清单？
论文引用指导文档.md 中指导内容是否结合了本次四篇样本论文的实际引用案例和原文引用示例进行说明？
考察能力: Workspace Exploration
Task-Providing File Utilization
Semantic Content Relations Understanding
角色: Operations Manager
任务难度: 困难（步骤超过10步且包含协同类型3）
任务: 用户服务目录下是公司最近的客户服务数据，我现在有一批新的数据需要整理，根据已有文件总结一份support_ticket撰写模版support_ticket_template.json保存到同目录
输出文件:
support_ticket_template.json
评估标准:
输出文件support_ticket_template.json是否存在且格式为有效的JSON？
模版中是否包含ticket_id字段，并说明其格式为"SUPP_{number}"字符串类型？
模版中是否包含customer_id字段，并说明其格式为"CUST_{number}"字符串类型？
模版中是否包含issue_category字段，并枚举了所有允许的值：Billing、Account、Technical、General？
模版中是否说明issue_category可以是单个或多个值，多个值用换行分隔？
模版中是否包含priority字段，并枚举了所有允许的值：Low、Normal、High、Critical？
模版中是否说明priority可以是单个或多个值，多个值用换行分隔？
模版中是否包含subject字段，并说明其格式为"Issue_{number} - Customer Request"？
模版中是否包含description字段，并给出了示例描述文本？
模版中是否包含created_date字段，并说明其格式为ISO 8601的YYYY-MM-DDTHH:MM:00Z？
模版中是否包含updated_date字段，并说明其格式要求？
模版中是否包含resolved_date字段，并说明其可以是ISO格式字符串或null（未解决时）？
模版中是否包含assigned_to字段，并说明其格式为"Support_Agent_{number}"？
模版中是否包含status字段，并枚举了所有允许的值：New、In Progress、Resolved、Closed？
模版中是否说明status可以是单个或多个值，多个值用换行分隔？
模版中是否包含resolution_time_hours字段，并说明其为数字类型表示小时数？
模版中是否包含customer_satisfaction字段，并说明其评分范围是1到5之间？
模版中是否说明customer_satisfaction可以是单个或多个评分值，多个评分用换行分隔？
模版中每个字段是否都包含描述说明，至少包含类型和示例？
输出的模版JSON是否能够正常解析，没有语法错误？
考察能力: Workspace Exploration
Task-Providing File Utilization
角色: Operations Manager
任务难度: 困难（步骤超过10步且包含协同类型3）
任务: 我的自媒体目录下是我近期的一些社交媒体发布数据，现在需要一份报告social-media-post-summary.md,放到同目录下，根据点赞、互动、曝光率等指标看看什么平台什么内容效果最好
输出文件:
social-media-post-summary.md
评估标准:
输出报告中是否显示共有67条posts被成功分析？
平台分析表格中是否包含Facebook和Instagram两行数据？
Facebook平均互动率是否为6.94%？
Instagram平均互动率是否为5.66%？
Facebook平均点赞数是否约为1,026,200？
Instagram平均点赞数是否约为1,645,666？
Facebook平均曝光量是否约为140,861,428，Instagram平均曝光量是否约为154,450,566？
Instagram总新增粉丝数是否为70,152,300？
Facebook总新增粉丝数是否为16,823,500？
报告中是否指出Facebook是拥有最高互动率的平台？
报告中是否指出Instagram是发文最多（53篇）的平台？
内容类型分析表格中是否包含Image和Text两行数据？
Text类型内容平均互动率是否为5.97%？
Image类型内容平均互动率是否为5.90%？
Text内容平均点赞数是否约为1,612,993？
Image内容平均曝光量是否约为149,520,000？
Text内容平均曝光量是否约为153,765,454？
报告中是否指出Text类型内容是互动率最高的内容类型？
报告中是否指出Image类型内容是发文最多（34篇）的内容类型？
报告结论中是否明确给出了哪个平台效果最好，哪种内容类型效果最好？
报告中是否包含至少五条可执行的推荐建议？
输出文件social-media-post-summary.md是否为有效的markdown格式，包含表格和标题层级？
Facebook详细数据部分是否显示平均评论数约为714,982？
Instagram详细数据部分是否显示平均分享数约为343,135？
考察能力: Workspace Exploration
Task-Providing File Utilization
Semantic Content Relations Understanding