JSG
JMIR严肃游戏
JMIR严肃游戏
2291 - 9279
卡塔尔世界杯8强波胆分析JMIR出版公司
加拿大多伦多
v2i2e11
25654163
10.2196 / games.3825
的观点
的观点
如何系统评估应用于医疗保健的严肃游戏
Eysenbach
冈瑟
Paraskevopoulos
Ioannis
Graafland
Maurits
医学博士
1
http://orcid.org/0000-0003-1059-698X
Dankbaar
玛丽
MSc
2
http://orcid.org/0000-0003-0880-505X
莫特
Agali
医学博士
3.
http://orcid.org/0000-0003-3419-0407
Lagro
•
医学博士
4
http://orcid.org/0000-0002-0787-9498
De Wit-Zuurendonk
劳拉
医学博士
5
http://orcid.org/0000-0002-4302-4534
Schuit
斯蒂芬妮
医学博士
6
http://orcid.org/0000-0003-1200-9961
Schaafstal
阿尔玛
博士学位
7
http://orcid.org/0000-0002-0832-2827
Schijven
土地肥沃的
医学博士,MHSc
1
外科
学术医疗中心
邮政信箱22660
阿姆斯特丹,1100 dd
荷兰
31 20 566 4207
31 20 691 4858
m.p.schijven@amc.uva.nl
http://orcid.org/0000-0001-7013-0116
1
外科
学术医疗中心
阿姆斯特丹
荷兰
2
Desiderius学校
医学教育系
伊拉斯谟大学医学中心
鹿特丹
荷兰
3.
国家军人康复中心
多尔恩
荷兰
4
老年科
哈加Ziekenhuis
海牙
荷兰
5
妇产科
Máxima医疗中心
Veldhoven
荷兰
6
急诊和内科
伊拉斯谟大学医学中心
鹿特丹
荷兰
7
信息通信技术部
温德斯海姆应用科学大学
兹沃勒
荷兰
通讯作者:Marlies Schijven
m.p.schijven@amc.uva.nl
Jul-Dec
2014
11
11
2014
2
2
e11
31
08
2014
10
09
2014
15
10
2014
17
10
2014
©Maurits Graafland, Mary Dankbaar, Agali Mert, Joep Lagro, Laura De witi - zuurendonk, Stephanie Schuit, Alma Schaafstal, Marlies Schijven。最初发表于JMIR Serious Games (http://games.www.mybigtv.com), 2014年11月11日。
2014
这是一篇开放获取的文章,根据创作共用署名许可协议(http://creativecommons.org/licenses/by/2.0/)发布,允许在任何媒体上不受限制地使用、分发和复制,前提是正确引用最初发表在JMIR Serious Games上的作品。必须包括完整的书目信息,http://games.www.mybigtv.com上的原始出版物的链接,以及此版权和许可信息。
特定的严肃游戏在医疗领域的有用性和有效性通常是不清楚的。这是由于缺乏对单个游戏有效性的支持证据,以及缺乏公开可用的信息。此外,开发或应用医疗严肃游戏的个人和机构对设计原则的理解不足会影响它们的使用。这篇文章提供了第一个基于共识的评估特定医疗严肃游戏的框架。该框架提供了5个主题中的62个项目,旨在评估一款严肃游戏的基本原理、功能、有效性和数据安全性。这将使护理人员和教育工作者在将严肃游戏应用于医疗保健目的时做出平衡的选择。此外,该框架为游戏制造商提供了开发新的、有效的严肃游戏的标准。
共识
严肃的游戏
应用游戏
远程医疗
移动健康
视频游戏
背景
严重的或
应用游戏数字游戏的目的是提高个人在“现实”世界中的知识、技能或态度吗?应用于医疗或健康相关目的的严肃游戏在数量和类型上都在迅速增长。在提高老年人的认知能力方面,严肃游戏已被证明至少与传统测试一样有效[
1]在提高酒精患者的神经心理能力方面,甚至比传统的神经心理学干预更有效[
2].严肃的基于游戏的干预已被用于支持残疾患者的康复,与传统的训练计划相比,其效果相同[
3.].游戏已被用于促进儿童的健康行为[
4]并教育病人[
5,
6].严肃的基于游戏的患者教育也被证明可以提高白血病青少年的治疗依从性[
7].严肃游戏的第三个用途是训练医务人员[
8].严肃的游戏已被证明可以增加高级生命支持训练。
9],并与传统训练方法相比,提高医学生对老年病学原理的理解[
10].患者(
11]、学生及专业人士[
12通常认为基于游戏的干预是有趣和具有挑战性的。
尽管就这种目的的有效性而言,严肃游戏的结果是有希望的,但由于卫生保健专业人员缺乏对基本概念的理解,甚至不信任,它们作为预防、治疗或卫生保健培训的“严肃”方式的实施受到了阻碍。在医生和患者考虑使用严肃的游戏来解决与健康相关的问题之前,重要的是他们要了解游戏解决的问题是什么,并且提出的有效性声明确实是值得信赖的。目前,许多临床医生在判断严肃游戏的安全性或有效性方面缺乏教育。在杂乱无章的应用商店和网站上很难找到单个游戏的信息。
13].关于严肃游戏的效度和效果的研究仍然很少[
8,
14].将电子游戏应用于医疗保健的想法甚至可能会引起某些临床医生或患者的不满。此外,对数据安全的威胁加剧了对医疗保健中的电子应用的不信任[
15].这些问题威胁着严肃游戏在整个医疗保健领域的实际应用,从而限制了对最终可能真正有益的智能解决方案的投资。
这篇文章讨论了应用于医疗用途的严肃游戏系统评估的第一个工具,适用于教育工作者和临床医生。根据收集和组织的信息,将帮助卫生保健从业人员以统一的方式了解和评估特定严重游戏在卫生保健中的风险和益处。
评估框架
据我们所知,目前还没有文献中描述的评估严重游戏在医疗保健中的系统框架。因此,荷兰医疗保健模拟学会(DSSH) [
16开发了一个基于共识的框架,对评估严肃游戏的安全性和有效性的重要项目进行分类。来自6个不同机构的8名参与者(详见致谢部分)在设计、应用或研究与健康保健相关的严肃游戏方面经验丰富。报告标准
非基于医疗目的的手机健康游戏应用(mHealth),由Lewis [
17]和Albrecht [
18],作为基础。该系统是由同行评审的移动健康应用程序评估倡议
医学互联网研究杂志[
19].由于在功能上的固有差异
游戏相比纯粹的信息
移动健康应用程序,这个框架需要重新评估。
该小组在两次会议上审查了这些报告标准中的项目。Albrecht框架中的所有项目[
18进行了系统评估。在这5个类别中,我们都删除了与严肃游戏无关的道具,并在必要时添加额外道具。在第二次小组会议期间,对框架进行了重新评估,所有成员都批准了最终版本。
所描述的框架包括5个主题的62项内容(
表1),旨在评估严肃游戏的基本原理、功能、有效性和数据安全性。确实是这样
不目标是根据成功或用户吸引力来评估其有效性。该小组将严肃游戏(不包括常规的医疗应用)定义为以对现实有用的技能、知识或态度的形式激发用户特定行为改变的数字应用。
20.].因此框架会这样做
不适用于(移动或基于web的)纯信息目的的数字健康应用程序
移动健康App评估框架设计[
18].
用于卫生保健相关目的的严肃游戏的评估相关项目。
|
类别 |
项 |
问题 |
游戏描述 |
元数据 |
操作系统 |
游戏的操作系统 |
|
版本 |
版本 |
|
网页链接 |
网页链接 |
|
项目类型 |
商业的,非商业的,其他的 |
|
访问 |
公共的/受限的/其他的 |
|
附属设备 |
是否需要辅助设备? |
发展 |
资金 |
开发资金是如何获得的?例如,融资机构、投资者 |
赞助/广告 |
广告策略 |
游戏是否没有弹出广告? |
|
|
如果不是,广告是什么? |
|
收入来源 |
游戏中是否存在收入来源? |
|
游戏之外的收入来源 |
所有者/分销商的收入来源是什么? |
潜在的利益冲突 |
从属关系 |
出版商有什么从属关系可以影响内容或用户群体? |
|
利益冲突 |
发行商拥有哪些利益能够影响游戏内容或用户群体? |
|
信息披露 |
是否披露了利益冲突? |
基本原理 |
目的 |
目标或目的 |
游戏的目的是什么? |
|
信息披露 |
用途是否向用户披露? |
医疗设备 |
医疗设备 |
严肃游戏到底是不是一种医疗设备? |
|
类 |
如果是,是哪一类? |
|
法律机构批准 |
如果是,是否符合必要的要求(fda批准,ce标志?) |
用户组 |
特定用户群 |
针对每个用户组:疾病/病症或卫生保健专业。 |
|
描述 |
请注明性别、年龄(范围)及其他相关描述项目。 |
|
限制 |
有年龄限制或其他限制吗? |
|
信息披露 |
是否公开了预期的用户组? |
设置 |
病人护理 |
这款游戏是否用于病人护理? |
|
培训课程 |
这个游戏是用于培训课程还是非课程? |
|
SCORM依从 |
如果在培训课程或课程中使用,严肃游戏是否符合scorm ? |
功能 |
目的/教学特点 |
对于游戏的每一个目的: |
|
|
学习或行为目标 |
玩家会学到什么内容? |
|
关系学习和游戏玩法 |
学习内容如何与游戏玩法联系起来? |
|
指令 |
引导学习转变的干预措施(例如,教程、指导(游戏内)) |
|
游戏中的评估(进程) |
游戏进程是通过哪些参数来衡量的? |
|
评估参数 |
在设计师看来,哪些参数是衡量学习效果的指示性参数? |
内容管理 |
内容管理系统 |
内容管理系统是否仅限于指定的人员或机构? |
|
用户上传内容 |
如果不允许,用户是否可以上传自己的内容? |
|
内容监控 |
如何检查上传的内容? |
|
严肃游戏的限制和限制 |
请描述严肃游戏的限制和限制。学习目标的哪些内容没有涵盖? |
潜在的不良影响 |
潜在的不良影响 |
游戏会产生哪些潜在的不良影响? |
|
信息披露 |
这些潜在的不良影响是否向用户披露? |
|
采取的措施 |
采取什么措施来防止潜在的不良影响? |
有效性 |
设计过程 |
医学专家共谋 |
医学专家(内容专家)是否从一开始就参与了设计过程? |
|
用户组共谋 |
用户组的代表是否从一开始就参与了设计过程? |
|
教育家同谋 |
教育工作者是否从一开始就参与了设计过程? |
用户测试 |
用户测试 |
是否进行了用户测试?结果是什么?这些结果是如何融入设计的? |
稳定 |
平台稳定 |
游戏在不同平台上产生的结果是否相同? |
有效性(有效性) |
表面有效性 |
教育者和受训者认为这是一种有效的教学方式吗? |
|
内容效度 |
如何验证它的内容是完整的,正确的,并且只是预期的医学结构? |
|
建构效度 |
游戏是否能够衡量它想要衡量的技能差异? |
|
同时效度 |
学习结果与评估相同医疗结构的其他方法相比如何? |
|
预测效度 |
玩游戏能预测现实生活中技能的提高吗? |
数据保护 |
资料保护及私隐 |
数据处理 |
严肃游戏中的数据是如何收集的? |
|
病人的隐私 |
特定于患者的数据是否存储在游戏中? |
|
如有,是否符合国家相关标准的患者知情同意标准? |
|
数据所有权 |
谁拥有和存储游戏产生的数据? |
|
数据存储期限 |
在什么时期存储数据? |
|
数据删除 |
用户可以暂时和/或永久删除数据吗? |
|
数据存储安全 |
数据存储是否符合上述国家的法律? |
|
数据传输安全 |
数据传输是否符合上述国家的法律? |
|
信息披露 |
是否所有有关“资料保障”的项目都已向使用者披露? |
评估医疗类严肃游戏
游戏描述
在评估一款特定的严肃游戏时,应该对其进行全面的描述和注册(包括关于游戏的制造商或所有者以及版本的信息)。与移动应用程序一样,在开发和使用过程中,所有者关于赞助和广告收入的政策中也会考虑到特殊利益。收益来源和从属关系(如制药行业)可能会因为显而易见的原因而影响或威胁一款严肃游戏的有效性。这些内容应该完全向游戏用户公开。游戏中的收入来源可能与初次购买所需的成本同样相关。
基本原理
这明确了游戏在游戏之外的目的。这种外部目的(例如,改善腹腔镜手术中的眼手协调)可能与实际目标不同
在游戏(例如,在地下世界完成一个任务)
21]或打网球[
22])。这与Albrecht框架明显不同,因为大多数移动健康应用程序都有一个明显的目的(内部目标=外部目标)。游戏的目的与目标用户群体及其使用环境有关,这与移动健康应用类似。
此外,严肃游戏可能属于医疗设备范畴,需要美国食品和药物管理局(FDA)、欧洲委员会(Conformité Européenne)制定具体的指导方针
,CE),或国家等价物。这尤其适用于带有明确诊断或治疗目的的游戏。此外,将严肃游戏整合到电子学习环境中可能需要一定的技术要求。业界已经制定了提高电子学习内容互操作性的标准(共享内容对象参考模型;SCORM) [
23].它的实施将提高教育严肃游戏在学习管理软件中的整合。
功能
严肃游戏的功能明显不同于移动健康应用。后者通常包含“枯燥”的内容(如医疗信息)或明显的功能(如交流或注册信息),而游戏则需要用户操作或与内容互动,最终目标是改变人们在现实生活中的行为(如学习)。为了理解这一过程,我们需要了解游戏内容、如何传达指令、如何评估性能以及如何将这些方面整合到游戏玩法中。
24,
25].
因此,注册关于游戏内容管理的信息非常重要。例如,用户可以自己添加内容,这使得内容验证成为一个重要问题。这将直接影响游戏内容的有效性。
最后,在与严肃游戏的互动中,可能会出现意想不到的结果或学习的负迁移,这与“游戏游戏”(即作弊)是不同的概念,后者可能会很好地加强学习[[
24].如果没有进行验证研究,开发者至少应该提供游戏玩法和行为或学习目标之间的逻辑联系。
有效性
有效性决定了一个教学工具(如严肃游戏)是否充分地类似于它旨在教育或测量的结构
.更正式的说法是,“在何种程度上,证据和理论支持使用[游戏]所带来的[游戏]分数的解释”[
26].美国心理协会制定了一系列衡量有效性的标准[
26].尽管已经描述了许多效度类型,但医学教育中的效度研究通常包含几个相应的阶段[
27,
28].首先,专家应该仔细检查游戏的内容,以确定其合法性(
内容效度)。其次,专家和新手判断乐器与它试图表示的结构的明显相似性(
脸效度)。
构造有效性反映了该工具实际测量它打算测量的内容的能力(即,在现实中具有不同经验水平的用户组之间的表现差异)。
并发有效性反映了他们在严肃游戏中的表现和在被认为是衡量相同结构的工具(如模拟器或课程)上的表现之间的相关性。最终目标是证明游戏的价值
预测有效性:游戏中的表现是否会在现实中带来更好的结果?目前在医学领域发表的大多数验证研究都使用这些概念[
29].对于个别情况,特定效度类型的相关性可能不同。在考虑移动健康应用程序时,内容有效性可能是有效性的唯一来源。
效度研究通常是一项漫长而昂贵的事业。因此,许多新开发的严肃游戏尚未进行效度研究[
8].因此,该框架决定了预先评估严肃游戏作为有效工具的潜力的若干步骤,包括其设计和初始测试阶段。这包括用户群体、内容专家或教育专家参与设计(如果与游戏目的相关)。其次,如果一款游戏经历了用户测试和稳定性测试,那么这款游戏就更有可能拥有更高的外观和内容有效性。
数据保护
电子和移动健康应用程序对用户隐私的威胁迫在眉睫,特别是当特定患者的数据被测量或输入游戏时[
15].这包括设备或服务器上“静止”的数据,以及“传输中”的数据。必须明确数据是否由游戏收集,谁拥有这些数据,以及用户是否可以要求删除他们的数据。个人数据的存储和分析应向用户公开,且必须符合严肃游戏发行所在国的法律。如果收集病人信息,必须特别小心。这些项目基本上符合Albrecht框架中描述的移动健康应用程序的要求[
18].
讨论
当在医疗保健中使用严肃游戏时,最终用户(临床医生、患者或教育工作者)必须决定游戏是否足够安全有效,可以用于预期目的。为了做到这一点,他们需要一致、透明和可靠的评估。应用游戏是否真的在这一领域占有一席之地?在本文描述的框架中,开发者和终端用户都可以评估应用游戏的相关性、有效性和数据安全性。为了成为一款“合格的游戏”,开发者应该公开其产品和声明的全面信息。他们必须提供透明度以达到标准。的
医学互联网研究杂志和荷兰医疗保健模拟学会[
16已经发起了一项针对卫生保健领域严肃游戏的国际同行评审倡议。
安全应用技术增强型解决方案仍然是卫生保健提供者的责任。选择一款严肃的游戏是否能满足用户的需求,可以基于本文所描述的5个主要领域的信息。大多数项目不能用客观参数进行评估。例如,宣称一款特定严肃游戏的预测有效性应该得到可靠证据的支持。由一个专家小组以质量标签的形式进行综合评价可以形成一个更实际的解决办法。
最近已发布指南报告标准,以支持临床医生和患者区分高质量移动医疗应用程序[
17-
19]和医疗网站[
30.].这些标准构成了本文所描述的框架的基础。对于游戏来说,这些标准有两个重要的缺点。首先,关于严肃游戏的内容和教学功能的明确信息是必须的,因为严肃游戏的外部目的对用户来说通常不像mHealth应用那么明显。其次,与非交互式信息平台相比,严肃游戏需要额外的验证步骤(如构建有效性和预测有效性)。游戏玩法是动态的,游戏玩法中的学习目标通常不会透露给用户。事实上,用户通过玩游戏来学习,而发现本身可能是玩法的一部分。因此,公开学习目标会适得其反。
本研究中描述的框架有几个局限性。它考虑了严肃游戏内容的有效性及其教学功能。有效性并不能预测游戏的成功或对用户的吸引力,这还取决于它的娱乐能力和传播方法。
31].它并不想物化哪款游戏最有趣,而只是物化哪款游戏最有效。第二个需要考虑的问题是,在医学效度研究的科学领域,有人提出了与本框架中使用的效度概念不同的效度概念[
32].“经典”效度概念(内容效度、表面效度、构念效度、同时效度和预测效度)在医学效度研究中使用最为频繁,因此在本文提出的框架中包含这些概念是最合乎逻辑的[
27,
28].
总之,这个基于共识的工具为最终用户在评估严肃游戏在医疗保健中的有效性和相关性时提供了所需的支持。fda批准或ce标志根本不足以达到这一目的。为了防止不知情的患者或医学生的错误应用和数据盗窃,这些关于医疗严肃游戏的信息应该向所有最终用户公开。这将有助于为患者开出安全有效的游戏处方,并将游戏纳入教育项目。
作者获得了美国国家科学院的患者安全项目(grant ref PID 101060)的资助
德尔塔的Pieken该项目由荷兰经济事务、农业和创新部、乌得勒支市和乌得勒支省共同发起。供资机构没有参与协商一致意见工具的编制,也没有参与文稿的编制。
荷兰模拟医疗保健协会(DSSH)的严肃游戏委员会由以下成员组成:M Graafland(荷兰阿姆斯特丹学术医疗中心外科);丹克巴尔医学院(荷兰鹿特丹伊拉斯谟大学医学中心医学教育系(德西德里乌斯学院);A Mert(荷兰多恩国家军事康复中心);J Lagro(荷兰奈梅亨内梅亨大学医学中心老年病学);LD de wite - zuurendonk(荷兰维尔德霍芬Máxima医疗中心妇产科);SCE Schuit(荷兰鹿特丹伊拉斯谟大学医学中心急诊和内科系);A Schaafstal(荷兰兹沃勒温德斯海姆应用科学大学信息通信技术系);Schijven议员(荷兰阿姆斯特丹学术医疗中心外科)。
没有宣布。
[
Kueider
我
帕里
JM
总值
艾尔
Rebok
吉瓦
老年人的计算机化认知训练:系统回顾
]
[
Gamito
P
奥利维拉
J
洛佩斯
P
布里托
R
莫莱斯
D
席尔瓦
D
席尔瓦
一个
雷贝洛
年代
巴斯托斯
米
迪乌斯
一个
移动健康认知刺激计划对酗酒者执行功能的影响:随机对照试验
]
[
Prange
GB
Kottink
人工智能
Buurke
JH
伊克
毫米
范Keulen-Rouweler
BJ
罗纹机
通用汽车
Rietman
JS
手臂支撑配合康复游戏对亚急性脑卒中上肢功能的影响:一项随机对照试验
]
[
Majumdar
D
科赫
巴勒斯坦权力机构
李
H
师范学院
红外
Islas-Ramos
广告
傅
D
“生物101”:一个促进中学青少年能量平衡相关行为的严肃游戏
]
[
库珀
H
库珀
J
弥尔顿
B
以技术为基础的方法,患者教育的年轻人患有糖尿病:系统的文献综述
]
[
读
莱托
Shortell
SM
互动游戏促进预防和治疗行为的改变
]
[
加藤
点
科尔
西南
Bradlyn
作为
波洛克
黑洞
一项随机试验表明,电子游戏可以改善青少年和年轻癌症患者的行为结果
]
[
Graafland
米
Schraagen
JM
Schijven
国会议员
系统回顾严肃游戏在医学教育和外科技能训练中的应用
]
[
Buttussi
F
贝利
T
提篮Vidani
一个
Pausler
D
Carchietti
E
Chittaro
l
用于高级生命支持再培训的3D严肃游戏的评估
]
[
Lagro
J
范德波尔
MH
拉恩说道
一个
Huijbregts-Verheyden
FJ
Fluit
信用证
老Rikkert
毫克
用严肃游戏GeriatriX教授老年医疗决策和成本意识的随机对照试验
]
[
Forsberg
一个
Nilsagard
Y
博斯特罗姆
K
在康复中使用电子游戏的看法:多发性硬化症患者和物理治疗师的双重视角
]
[
Graafland
米
Vollebergh
曼氏金融
拉加德
SM
范Haperen
米
Bemelman
佤邦
Schijven
国会议员
严肃游戏是训练外科临床决策的有效方法
]
[
范·费尔森
l
Beaujean
DJ
范Gemert-Pijnen
我
为什么移动健康应用过载让我们疯狂,如何恢复理智
]
[
康诺利
TM
博伊尔
EA
麦克阿瑟
E
Hainey
T
博伊尔
JM
对电脑游戏和严肃游戏的经验证据进行系统的文献综述
]
[
科孜
D
移动健康隐私威胁分类
]
[
荷兰医疗保健模拟学会
官方网站
]
[
刘易斯
TL
系统的移动医疗应用自认证模型
]
[
阿尔布雷希特
紫外线
健康应用程序的信任和决策透明度
]
[
]
[
迈克尔
博士
陈
年代
]
[
Jalink
MB
戈里
J
海涅曼
E
Pierie
摩根大通
凯特·赫德梅克
何
为训练基本腹腔镜技能而制作的任天堂Wii视频游戏的构建和并发有效性
]
[
Badurdeen
年代
Abdul-Samad
O
故事
G
威尔逊
C
下来
年代
哈里斯
一个
任天堂Wii视频游戏能力预测腹腔镜技术
]
[
]
[
安德森
LW
Krathwohl
博士
布鲁姆
废话
]
[
范Staalduinen
摩根大通
de Freitas
年代
凯尼
女士
基于游戏的学习框架:将游戏设计与学习结果联系起来
]
[
美国教育研究协会,美国心理学协会,全国教育测量委员会
]
[
Schijven
国会议员
Jakimowicz
JJ
虚拟现实模拟器的验证:成功地将一种新型教学技术集成到最小访问手术的关键
]
[
加拉格尔
AG)
里特
新兴市场
Satava
RM
验证和可靠性的基本原则:外科教育和培训评估的严格科学
]
[
烹饪
达
Zendejas
B
Hamstra
SJ
Hatala
R
布里奇斯
R
什么是有效证据?基于模拟的评估系统回顾中的例子和流行
]
[
]
[
征求
F
Kapralos
B
李
K
Moreno-Ger
P
贝尔塔
R
严肃游戏中的评估:概述
]
[
烹饪
达
贝克曼
TJ
心理测量仪器效度与信度的最新概念:理论与应用
]