system: [SYSTEM]

user: 2. 国际的在线实验平台简介 2.1. Qualtrics在线实验平台简介 史密斯在2002年与父亲共同创办了Qualtrics，它是一个在线调查的软件公司。Qualtrics的目标是简化调查难题，为此，在上面做调查研究的单位或者企业可以集中精力关注研究调查，而不是软件。发展至今，只要研究者有需求的，Qualtrics都可以做到。而参与调查的被试，只需轻松地在电脑前通过鼠标、键盘输入反应，就可以完成调查问卷从而获得一定的收入。 能在在线调查平台中脱颖而出，是因其团队首先定位在学术院校并培养了一批高学历的忠实用户。Qualtrics完成任务的速度快过其他软件，而且发布调查的用户可以管理自己的商标，推广活动，信息，选择，报道，图标，图表，图像，颜色，报道，编码，邮件，字体，皮肤，分享，面板等。伴随开发团队的的壮大，Qualtrics公司的调查软件也一直在不断地提升，添加新的功能，实现和兼容了很多自定义的JavaScript的编程语言，这些早期的突破使其在研究调查领域独占鳌头。另外对于学术研究者来说，Qualtrics提供免费使用的基本版软件满足了很多调查研究的基本需求。其同样也提供很多付费的专业服务。 这一国际研究平台在国内心理学研究机构也得到应用，如北京师范大学心理学部实验中心就购置了Qualtrics在线调查平台系统，面向心理学院全体师生免费开放，用户可使用bnu的后缀邮箱进行注册获取使用权限。通过该系统，主试可无限制添加调查项目，并通过丰富的模块库和流程控制系统灵活定制调查内容，并通过该平台分发邀请、数据收集和整理导出，极大的提升了心理学问卷调查的质量和效率。 2.2. Mturk在线实验平台简介 基于众包(crowd sourcing)而搭建一个虚拟的“行为实验室”，为解决心理学研究中的样本可获得性问题提出了崭新的思路。研究者可通过互联网平台招募实验参与者，通过程序要求本身寻找合适的实验对象，允许实验对象在虚拟的网络环境内进行互动共同完成一个实验任务，同时允许实验者进行灵活的实验控制，可以较低的价格吸引更多的实验参与者。采用这一思路最成功的案例来自于亚马逊的Mechanic Turk (简称Mturk)平台，见图1。 亚马逊旗下Amazon Mechanical Turk成立于2005年11月，作为一个众包平台，其出现提供了一种发布任务并收集数据的新途径。在这一平台上，worker (被试)是真实存在，且经过身份住址认证。只是主试(requester)未必需要搜集被试的个人ID信息。为了保证requester采集数据的有效性，亚马逊提供了两个方式：1)只有当参与者的任务反应或者回答(HIT)被研究人员确认(approve)才能得到对应的报酬；2)每一次实验完成后，研究人员都会对参与者进行评价，只有当参与者的综合评价达到一定标准时才有机会参加其他实验。 为了增加亚马逊平台对开发者的友好度，Mturk也发布了自己的API，研究者可以通过编程方式直接发布实验，自动approve被试的反应甚至自动支付被试费用。大大节省了研究人员的工作时间。也正是基于这个API，越来越多的开发者结合Python和JavaScript发布了越来越多相关的开发工具，使得这一平台对具有基本编程知识的研究者就能发布自己的研究应用到Mturk。 例如PsiTurk这一软件包，就可较好解决在线收集行为数据的麻烦。通过修改测试已有的代码模板，发布HIT到Mturk，再付费给参与者。另外一个值得一提的工具是TurkServer，这是一个专注于做多人交互研究的实验工具。如2017年，基于TurkServer的一项研究通过在线的虚拟实验室，采用多人的囚徒困境范式，考察了人们长期合作行为，该研究发表在自然通讯(Nature Communications)杂志上(Mao et al.， 2017)。类似psiTurk这样的工具使用可以让研究者专注于研究而不是软件开发。 然而，这一在国际上广泛使用的研究平台在国内尚未得到推广。我们在百度学术以Mturk为关键词搜索，结果显示从2016年到2018年，心理学领域的文献数量100多篇，和国际上研究数量相比这一数字非常低。这其中一个原因是访问限制，另外人工成本价值的优势对中国研究者来说吸引力也不足。目前MTurk平台用户体验一般，该平台抽成也较高。截止目前，主试支付给被试的费用，亚马逊将会抽取高达20%的中介费。 2.3. PsychoPy在线实验平台简介 PsychoPy是使用python语言编写的一个开源软件，可在神经科学、心理学以及心理物理学的各种实验中用于刺激呈现和数据收集。这一软件免费且拥有强大的功能可以替代传统的Presentation、E-Prime 图1. 亚马逊平台的主试界面 和MATLAB等心理学编程工具。2003年，英国诺丁汉大学的Jonathan Peirce教授(https://www.nottingham.ac.uk/psychology/)。 people/jonathan.peirce)开发了这一软件，并首先在诺丁汉大学心理学实验室应用。相比其他刺激编程软件，PsychoPy提供独有的两种界面选择：1) 使用Builder界面可以轻松拖动、编制丰富灵活的实验程序；2) 使用Coder界面使得有一定Python编程语言基础的研究者能编写非常强大的实验程序。在经历了十几年间数次的版本更新后，2018年1月，PsychoPy得到英国Wellcome Trust基金的资助，招募开发团队，最终在2018年底发布了PsychoPy3和其基于PsychoPy的在线实验功能。 图2. Pavlovia.org网站的主试界面 其基本方式是：将研究者编写的实验程序导出为JavaScript语言，为在线实验做准备。之后GitLab上传到PsychoPy官方提供的Pavlovia.org网站(见图2)。在激活(activate)该研究后，把研究的网址发送给实验被试以完成实验数据搜集。值得一提的是，Pavlovia.org网站不仅接受PsychoPy的编程材料，而且兼容基于Python和JavaScript的编程实验(如PsychoJS)。尽管目前很多功能还不支持，但这一工作对全世界心理学研究者来说都是值得兴奋的。 2.4. Crowd Flower (CF) 2009年，Crowd Flower (已于18年3月更名为figure eight，网址https://www.figure-eight.com)在Tech Crunch 50会议上正式启动。该平台更多面向企业，拥有庞大的客户基础(包括eBay、SAP、Oracle、Adobe等)。Crowd Flower专注于AI数据，是必不可少的一个人机交互平台。2013年12月起，Crowd Flower宣布停止从Mturk招募worker。但是依然，Crowd Flower从许多不同渠道的合作伙伴那里获取worker，包括广泛的人口统计数据。其被试的平均时薪是3美元左右，对于与人力资源有关的心理研究来说，依然是一个选择。 2.5. 其他在线实验平台简介 除了以上介绍的一些平台，很多其他的网站也提供了可用于在线心理学实验的平台。如testable.org网站，支持研究者通过上传.csv格式的实验设计作为trial file，支持多种格式的刺激材料上传(包括知情同意书)，也支持基本的中文显示(见图3)。其提供的在线被试平台叫做Testable Minds，但是在线的用户较少。虽然其提供给学术研究者免费在Testable Minds搜集数据，但是因为worker较少，一般都需通过外部链接进行数据搜集。从Testable官方提供的资料来看，搜集500名被试的数据需付费给网站150美元。其数据存储有两种选择，被试进行本地保存或者保存在testable网站，后者研究者可以随时下载，但是对免费用户存储空间是100 M。 图 3. Testable.org网站的主试界面(左)和被试界面(右)举例 与testable类似的网站还有gorilla (https://gorilla.sc/)。该网站提供了较为基础的实验模板供研究者编辑发布(图4)。然而，其采用的模式是由网站直接支付给被试参与费用，如搜集500名被试，gorilla估算的被试费收费为1430美元，加上10%的管理费用。由于简单易用，也发布了自己的API， 目前很多英国高校的心理系都是gorilla的客户。 图 4. Gorilla 网站的实验模板界面 2.6. 研究者在个人或实验室网站实现的实验平台 随着互联网技术的发展，越来越多的研究者注重建设自己的实验室网站。与此同时，研究者也重视将个人研究有关的实验发布到网站进行在线演示或者数据搜集。这种方式一方面可以对研究者的研究进行宣传，也可以实现进一步在线的数据采集。如加州州立大学富勒顿分校的Michael Birnbaum教授就通过自己个人网站的在线实验搜集人们赌博决策的行为数据(图5)。 图5. Michael Birnbaum教授网站的赌博实验界面 当然还有很多在线实验平台未被本文一一介绍。读者可以参考社会心理学网站提供的Web-Based Data Collection Service栏目获得更多相关信息(https://www.socialpsychology.org/expts.htm#services)。很多研究不会只在一个平台进行，而是结合不同平台的优点，采用多平台的数据。如2017年Jonathan Phillips和Fiery Cushman发表在美国国家科学院院刊的一项研究用到了Mturk， testable， Quatrics和Turkprime等 (Phillips & Cushman， 2017)。