JMIR J医学网络杂志 医学互联网研究杂志 1438 - 8871 卡塔尔世界杯8强波胆分析 加拿大多伦多 v22i12e17531 33270034 10.2196/17531 审查 审查 痴呆症患者参与技术干预的发展:叙事综合回顾和最佳实践指南 Eysenbach 冈瑟 马尔文尼 莫里斯 吉布森 格兰特 意大利广播电视公司 Harleen考尔 二元同步通信,MSc 1
精神病学与应用心理学学部 心理健康研究所 诺丁汉大学 胜利之路 诺丁汉NG7 2图 联合王国 44 01157484252 Harleen.Rai@nottingham.ac.uk
https://orcid.org/0000-0002-8121-6094
卡瓦尔康蒂巴罗佐 艾琳 二元同步通信,MSc 1 2 https://orcid.org/0000-0002-4498-0843 耶茨 劳伦 博士学位 3. https://orcid.org/0000-0001-7495-3224 施耐德 杰斯丁 博士,博士,教授 2 https://orcid.org/0000-0002-5863-7747 Orrell表示 马丁 博士,教授博士,FRCPsych 1 https://orcid.org/0000-0002-1169-3530
精神病学与应用心理学学部 心理健康研究所 诺丁汉大学 诺丁汉 联合王国 社会学与社会政策学院“, 法律和社会科学大楼 诺丁汉大学 诺丁汉 联合王国 临床、教育和健康心理学系 伦敦大学学院 伦敦 联合王国 通讯作者:Harleen Kaur Rai Harleen.Rai@nottingham.ac.uk 12 2020 3. 12 2020 22 12 e17531 18 12 2019 15 2 2020 26 2 2020 ©Harleen Kaur Rai, Aline Cavalcanti Barroso, Lauren Yates, Justine Schneider, Martin Orrell。最初发表于《医疗互联网研究杂志》(//www.mybigtv.com), 2020年12月3日。 2020

这是一篇开放获取的文章,根据创作共用署名许可协议(https://creativecommons.org/licenses/by/4.0/)发布,该协议允许在任何媒体上不受限制地使用、分发和复制,前提是要正确引用最初发表在《医学互联网研究杂志》上的原始作品。必须包括完整的书目信息,//www.mybigtv.com/上的原始出版物链接,以及版权和许可信息。

背景

科技可以帮助痴呆患者在日常生活中获得支持。然而,痴呆症患者往往不能完全参与新技术的开发过程。痴呆症患者在开发基于技术的干预措施方面缺乏参与,可能导致实施错误和不太合适的技术。

客观的

本系统综述旨在评估目前的方法,并为痴呆症患者参与基于技术的干预制定最佳实践指南。

方法

2019年1月,我们对以下数据库进行了系统检索:EMBASE(摘录pta Medica数据库)、PsycINFO、MEDLINE(医学文献分析与检索系统在线)、CINAHL(护理及相关健康文献累积索引)和Web of Science。搜索策略包括三个类别的搜索词: 痴呆 技术, 参与开发.叙事综合以结构化的方式将证据编织在一起。

结果

共有21项研究符合纳入标准。大多数研究只涉及痴呆患者的单一阶段,如发展阶段(n=10)、可行性和试点阶段(n=7)或评估阶段(n=1)。只有3项研究描述了多阶段的参与。评估参与程度的常用方法包括焦点小组、访谈、观察和用户测试。

结论

大多数研究得出的结论是,让痴呆症患者参与进来是必要和可行的,这可以通过适当的先决条件来优化,确保技术满足可靠性和稳定性的标准,并为参与者提供积极的研究体验。描述了痴呆症患者参与开发基于技术的干预的最佳实践指南。

痴呆 技术 合拍片 参与 发展
介绍 背景

技术可以用来解决痴呆症护理的一些挑战,并使痴呆症患者尽可能长时间地保持他们的独立性[ 1].尽管现有的技术种类繁多(例如,提醒设备、触摸屏设备和应用程序,以及计算机化的认知和物理干预)[ 2],缺乏关于其有效性的证据,而且许多干预措施要么处于开发阶段,要么处于雏形阶段[ 3.].此外,痴呆症患者很少参与基于技术的干预措施的开发[ 4].缺乏参与的可能原因包括耻辱,对老年人虚弱的担忧,以及参与者因尝试欠发达的信息技术而预期的痛苦[ 5].以技术为基础的干预措施不发达,参与不足,可能存在残留缺陷,并可能使早期原型更难为痴呆症患者操作,导致痴呆症患者不愿使用它们[ 5].因此,正在开发的技术既不方便用户使用,也不适合支持痴呆症患者的目的[ 3. 4].有缺陷或设计不良的技术可能对支持痴呆症患者没有帮助。

此前的一项系统综述显示,痴呆症患者能够提供有用的反馈,如对屏幕尺寸、语言困难、网站私人空间个性化的重要性等的评论,有助于提高干预的质量[ 4].这种方法提高了基于技术的干预措施的可用性和可接受性[ 4]并在痴呆症患者身上产生快乐和热情[ 6 7].然而,Span等[ 4]只审查了2010年之前的论文,随后出现了许多技术创新。此外,Astell等[ 8和Span等[ 4断言,要通过确保解决痴呆症患者的需求和偏好来优化技术,关键是要实施一个参与性过程,让痴呆症患者参与整个开发过程[ 4 8].

关于如何优化痴呆患者的参与的信息分散,显然需要通过评估痴呆患者参与基于技术的干预措施和如何最佳促进和优化这种参与的指导方针的制定,以系统的方式收集证据。

目标

这一叙事综合系统综述旨在评估通过应用现有框架所使用的方法,如用于评价复杂干预措施的医学研究理事会(MRC)框架和电子卫生研究中心(CeHRes)路线图[ 9 10],并就如何更好地让痴呆症患者参与开发基于技术的干预措施并结合逻辑模型制定最佳实践指南。

方法 叙述合成

叙事综合是“一种系统回顾和综合多项研究结果的方法,主要依靠使用文字和文本来总结和解释研究结果。”[ 11].叙事综合可以用来解决关于干预措施有效性的许多问题,包括什么有效,以及为什么有效和如何有效。本次综述首选叙事综合,因为它可用于将证据转化为关于如何促进痴呆症患者参与基于技术的干预措施开发的明确和结构化的最佳实践指南。该方法包括4个要素:理论发展、发展初步综合、探索研究内部和研究之间的关系以及评估综合的稳健性。

元素1:理论发展

理论发展通过支持回顾问题的发展和纳入的研究类型来支撑系统回顾。我们的出发点是希望最终用户参与技术开发。几项研究表明,来自痴呆症患者的反馈可以提高技术的整体质量[ 4 8].这将产生更有用和更合适的技术,也将增加使用技术的意愿。此外,最终用户参与技术开发也可以支持未来技术的实施,导致更好的技术范围,以改善痴呆症患者的生活质量。因此,我们只包括那些清楚说明如何在开发过程中从痴呆症患者那里收集反馈的研究。这将排除那些只把参与者作为研究对象的研究,因为没有发生有意义的参与。本文所进行的叙述综合将有助于完善我们的理论起点,并支持本综述结果的应用[ 11].

元素2:发展初步综合

初步综合形成了对纳入研究结果的初步描述,其组织方式使模式可以根据影响或影响进行描述[ 11].这可以通过使用文本描述、分组和集群以及表格来实现。这个初步的综合是必要的,为下一步的叙事综合提供信息。

元素3:探索研究内部和研究之间的关系

初步综合中出现的模式要经过更详细的分析,在分析中,审稿人会探索纳入研究的内部和跨研究的关系[ 11].综述了不同研究的特征与报告结果之间的关系。叙事综合的这一元素将有助于确定可能影响结果的因素,并试图解释特定干预措施如何及为何起作用[ 11].这里使用的方法包括定性的案例描述和基于研究结果分组的概念模型的开发。这将有助于构建从我们的结果中得出的推论。

元素4:评估综合的鲁棒性

叙事综合的最后一个要素是审查结果的可信性[ 11].综合的可信性受到建立综合所依据的证据的质量和数量以及所使用的方法的影响。因此,我们进行评估,以判断研究结果证据的强度,并将其推广到不同的人群和背景[ 11].

电子查册及筛检

该综述在国际前瞻性系统评论注册(PROSPERO)中注册,协议号为CRD42017068933。在进行了2次试点搜索后,我们于2019年1月系统地搜索了以下数据库:EMBASE(摘录pta Medica数据库)、psyinfo、MEDLINE(医学文献分析与检索系统在线)、CINAHL(护理及相关健康文献累积索引)和Web of Science。研究考虑了2000年至2019年发表的研究。搜索策略包括以下3个主要类别的搜索词的组合和变化: 痴呆、技术, 参与开发.参与条款也包括 合作设计,参与研究, 用户参与开发。

删除重复文献后,由2名评审小组成员(HR和AB)独立进行3个阶段的筛选过程:(1)筛选与评审问题相关的标题,并将不相关的研究存档;(2)评估摘要(必要时参考全文以澄清研究的相关性);(3)对其余研究进行了质量评估(见 数据提取与研究质量评估部分)。排除原因通过将排除的研究存档在EndNote (Clarivate Analytics)的相关文件夹中记录。如果两个评审人员之间存在分歧,则咨询第三个评审团队成员(LY)。来自Span等人评论的其他研究[ 4]分别分布在4名评审成员(AB、JS、HR和LY)中,用于数据提取和质量评估。审查了通过质量评估的研究的参考文献清单,以确保列入其他有关论文。

纳入和排除研究的标准

研究的纳入和排除标准如下:

参与者类型:被诊断患有痴呆症的人,不论年龄、痴呆症类型或疾病阶段。

干预类型:痴呆症患者参与到基于技术的干预的开发过程中。

研究类型:定量、定性和混合方法研究,从2000年开始以英文期刊论文的形式发表,具有足够的研究质量(至少满足5项标准,符合关键评价技能计划[CASP]指南的评估,或满足50%的标准,符合唐斯和布莱克检查表的评估)。

开发阶段的描述

基于技术的干预措施的发展过程包括几个阶段。为了确定本次评审的技术开发关键阶段,我们采用了MRC框架和CeHRes路线图[ 9 10].这两个框架都侧重于制定干预措施;然而,尽管MRC框架更广泛地用于制定复杂干预措施,CeHRes路线图的重点是数字卫生干预措施( 表1).

描述医学研究理事会框架和电子卫生研究中心路线图。

阶段 医学研究委员会架构 电子健康研究中心路线图
发展

单相

确定证据基础(例如,系统审查)

确定或发展理论(例如,确定现有理论的范围和采访涉众)

建模过程和结果(例如,进行试验前经济评估、焦点小组、调查和案例研究)

多个阶段,如上下文查询、价值说明和设计

确定目标用户的问题和需求(例如,文献综述、实地观察、访谈和研讨会)

根据涉众的价值观确定最有利的解决方案

构建符合价值和用户需求的原型(例如,焦点小组和现场测试)

可行性和驾驶

具体的可行性和试点阶段

活动包括可接受性的测试程序、确定适当的样本数量和估计征聘率

N/A一个(可以作为设计阶段的一部分)

评价

评估临床和成本-效果(如随机对照试验)

理解过程(过程评估)

总结性评价

评估电子卫生技术在临床、组织和行为方面的影响

实现

将证据付诸实践

监视、监测和长期结果

操作化

在实践中引入、采用和使用技术的活动(例如,创建业务模型)

一个 N / A:不适用。

数据提取与研究质量评估

主要研究员(HR)开发了一个标准化的数据提取表单,在该表单中,评审团队成员记录了从最终研究中提取的数据,包括研究质量评级( 多媒体附录1) [ 6 7 12- 30.].

使用CASP指南评估质量。这些指南包括8份针对不同类型研究的检查清单,包括评估研究的多个方面(如招募、偏倚风险、混杂因素、数据收集、数据分析、结果和影响)的项目[ 31].若研究符合8项或以上的标准,则评为优质;若符合5至7项标准,则评为中等;若符合4项或以下标准,则评为低质[ 32].不符合CASP指南评估标准的研究使用Downs和Black检查表进行评估[ 33].该检查表适用于随机和非随机研究,包括5个领域的27个项目(报告、外部效度、内部效度偏差、内部效度混淆和权力)。最大得分与研究设计有关;然而,每项研究如果达到81%以上的标准就被评为高质量,如果达到66%至80%以上的标准就被评为中等质量,如果达到51%至65%以上的标准就被评为中等质量,如果达到50%或更少的标准就被评为低质量[ 34].被认为质量低的研究被排除在外。评审小组成员独立评估了研究的质量。两位评审人员之间的任何判断分歧都由第三位评审团队成员解决。

与病人和公众参与小组的会诊

一位审稿人(HR)在2个不同场合的患者和公众参与(PPI)会诊会上提出了研究结果。这个PPI小组在诺丁汉心理健康研究所每月进行一次。这两次会议的目的是深入了解人们对开发基于技术的干预措施的最佳参与的看法;他们对调查结果的反馈和意见;更具体地说,他们对作者起草的指导方针的反馈。然后,这些反馈将与本次审查的结果相结合,并用于加强最佳实践指南。

第一次会议有2名痴呆患者、1名护工、1名志愿者和1名研究人员参加,持续45分钟。第二次会议有2名痴呆患者、2名护工、1名志愿者和4名研究人员参加,持续25分钟。在对评审及其发现进行了简要介绍后,在投影仪上一次展示一个最佳实践指南。在第一次会议上,向每位与会者分发了印刷好的讲义。就每一项指导方针的相关性和准确性进行了简短的讨论,并在整个会议期间作了记录。

结果

结果部分包括叙事综合的第二个要素:发展初步综合。

搜索结果

在五个数据库( 图1).删除重复和筛选标题、摘要和全文,结果有20篇研究符合纳入标准。最常见的被排除在外的原因是缺乏以技术为基础的干预和缺乏发展进程。额外的手工搜索导致了另一项研究的纳入,共21项研究。这项研究来自于Span等人的一篇综述[ 4],当前的搜索策略没有捕捉到。同一篇综述中没有被搜索策略捕获的其他研究(n=7)被排除,因为它们不符合纳入标准(例如,不是期刊论文或研究质量低)。审查了通过质量评估的研究参考清单,以确保将任何其他有关研究列入其中。

研究选择流程图。护理及相关健康文献累积索引;EMBASE:摘录Medica数据库;联机医学文献分析与检索系统。

纳入研究的描述

所有21项研究的主要研究特征包括研究样本和设计、基于技术的干预描述和研究质量评级( 多媒体附录1 2) [ 6 7 12- 30.].使用CASP定性检查表,11篇研究被评价为高质量,8篇研究被评价为中等质量。只有1项研究采用CASP随机对照试验(RCT)检查表进行评估,符合11项标准中的7项[ 12].另一项研究使用唐斯和布莱克检查表进行评估。它被评为质量一般,达到了前后随访研究的65%的标准[ 13].大多数研究在欧洲进行(n=17), 3项研究在澳大利亚进行[ 13- 15], 1项研究在加拿大进行[ 16].

大多数研究采用纯定性方法(n=14)。共有6项研究采用混合方法,其中1项将定性方法与对照试验相结合[ 12].只有一项研究采用纯定量方法[ 13].这些研究描述了各种基于技术的干预措施,包括通信辅助工具、音乐工具、支持日常生活活动的设备、提醒系统和跟踪设备。在大多数研究中,痴呆症患者与护理人员或其他专业人员一起参与,他们或支持痴呆症患者参与,或自己提供单独的输入(n=17)。只有4项研究将痴呆症患者纳入研究范围[ 13 17- 19].

参与方法和主要发现

用于涉及痴呆症患者的方法以及MRC框架和CeHRes路线图的阶段总结在 文本框1,以便对研究结果进行初步综合。

方法是根据医学研究理事会框架阶段将痴呆症患者纳入研究(N=21)。

开发(上下文查询、价值说明和设计)

行为观察( 17 20.],焦点小组[ 6 7 18 21- 24),面试( 6 18 19 22 24- 27),车间( 7 25),调查问卷( 17,以及用户测试[ 6 7 18- 20. 22

可行性和驾驶

行为观察( 13- 16 28 29),面试( 14- 16 25 27 29 30.),调查问卷( 13 16 29 30.,实地测试[ 18 25 29],以及技术系统用途[ 27

评价(总结性评价)

随机对照试验[ 12],焦点小组[ 12),面试( 12],以及问卷[ 12

实现(操作化)

不适用

开发阶段(n = 10)

共有10项研究只涉及处于开发阶段的痴呆症患者,这与CeHRes路线图的背景调查、价值规范和设计阶段相一致。这些研究主要采用定性方法,如焦点小组和半结构化访谈。有时,这些测试还伴随着用户测试、观察和问卷调查。 文本框1提供开发阶段中使用的所有方法的概述。研究的目的从确定人们对某些发展领域(如独立性或认知强化)的需求、愿望和想法,到获得对未来或现有技术设计的反馈( 图2).

根据医学研究理事会的框架,在技术发展的各个阶段参与的目标和方法。

未来技术的需求评估与设计

总共有两项研究包括需求评估,然后讨论使用定性方法设计未来技术。波曼等人[ 21]利用焦点小组来捕捉有关可视电话及其设计概念的经验、期望和想法。设计必须灵活,以满足痴呆症患者的需求,易于使用,不像辅助技术。另一个例子是罗宾逊等人的研究[ 7他们还利用焦点小组从痴呆症患者和护理人员那里引出对独立性的看法和担忧。根据调查结果列出了一份优先事项清单。功能改进的领域包括双向通信、功能的灵活性和一些 指南他们在家的时候在外面。然后利用研讨会来确定未来技术的首选设计和功能方面。最后,使用纸上原型进行用户测试,直到开发出2个功能齐全的设备。

需求评估和用户测试

在其他3项研究中,需求评估之后进行了功能技术用户测试。奥普伍德等[ 19]通过对用户的采访(用户调查)来编制一个愿望清单,列出了在维持痴呆症患者生活质量方面具有重要意义的问题。产生了一大堆可以解决这些问题的潜在技术。选择了以下4种技术进行初步开发:音乐播放器、减少社交隔离的设备、对话提示器和支持任务序列的设备。有用的设计指南来自用户测试,特别是直观的控制界面(例如,控制需要突出,大,简单)。

触摸屏似乎非常直观,提示似乎比口头或视觉指示更有效。汉森等人[ 6]使用焦点小组来确定用户的需求和偏好,并在多媒体节目中组织材料。在用户测试之后进行了深入的访谈,并推出了一个原型。这些导致识别问题,如登录和退出程序和访问练习。参加者很喜欢电脑训练课程,并从学习一项他们以前认为不可行的新技能中获得相当大的满足感。Lopes等人[ 22]通过访谈分析用户需求,找出常见的放错位置的物品,如钥匙、眼镜、手机和身份证件。然后使用焦点小组和用户测试来测试现有的项目定位器,并定义新的项目定位器原型的以下系统需求:易用性、定制能力、低价格、非污名化设计和存在性 有趣的使用。下一步是使用第一个原型进行用户测试,参与者评论说他们更喜欢在定制的语音系统的声音引导下找到物品。

现有或未来技术的设计

在两项研究中,仅收集了关于未来技术设计的反馈,仅使用定性方法。在Meiland等人的研究中[ 24在焦点小组和访谈中讨论了集成辅助系统的潜在功能后,我们审查了非功能模型。参与者最看重紧急情况下的帮助、导航支持和日历功能。最不受欢迎的功能是活动支持和图片电话拨号。麦凯布和英尼斯[ 23]发现痴呆症患者和照顾者在焦点小组中对潜在GPS设计的形式和特征给出了特定的反馈(例如,防水手表风格的设计与一系列颜色)。然而,参与者更喜欢评论一个实际的、主动的设备,而不是假设的谈话,因为它没有为他们提供足够的背景。

在3项研究中,参与者对现有的功能性技术的设计给出了反馈。弗里曼等人[ 17]通过两个网站分析了痴呆症患者的观察数据。这些数据帮助揭示了3个主要问题:滚动、无法识别页面上的更多信息以及卡在页面上。通过问卷调查,两家网站的总体满意度都很高。科克霍夫等[ 26在对记忆辅助设备(规划委员会)进行台架测试后,他们采访了当地居民。大多数居民对辅助装置的使用和功能表示赞赏,但由于安装错误、用户友好程度有限以及对辅助装置的功能和使用缺乏了解,成功实施起来很困难。改进的重点领域包括软件程序的适应性、额外的技术应用、互联网连接、可访问性和增加媒体。最后,Klein等[ 20.]还分析了参与者在测试2个原型设备时的观察数据。在这些试验结果的基础上,研制了第三种原型装置。他们特别关注与个人相关和吸引人的内容、情境因素、更高水平的沉浸感以及对用户的更多控制。

可行性及试验阶段(n=7)

总共有7项研究只包括可行性和试验阶段,这可以作为CeHRes路线图设计阶段的一部分[ 13- 16 28- 30.].在这一阶段,痴呆症患者有机会在试点研究或现场测试中尝试一项技术。通常,目的是了解设备的有用性及其可接受性和可用性( 图2).在大多数研究(n=5)中,采用了混合方法,在使用设备时观察参与者,并通过半结构化访谈和问卷调查获得反馈。 文本框1概述了在可行性和试验阶段使用的所有方法。

贝古姆等人[ 16]通过观察来调查对机器人提示的依从性、与机器人的互动以及完成任务的频率。访谈和问卷提供了关于辅助机器人的接受度、易用性、实用性和物理属性的信息。梅兰等人[ 29现场测试了具有多种功能的集成数字假体。关于其可用性的数据是通过行为观察、采访和问卷调查收集的,它被认为是用户友好和有用的,但人们希望提醒功能更加个性化和配置。

莫伊尔等人[ 15通过视频记录和后续采访的观察,探讨了远程呈现机器人的可接受性。参与者表现出积极的社会形象,这也可以通过展示积极的情绪来观察到。莫伊尔和琼斯在另一项研究中采用了类似的方法[ 14].通过视频记录的观察结果被用来描述虚拟现实森林(VRF)对参与、冷漠和情绪状态的有效性。总的来说,VRF被认为有积极的影响,但有更高水平的恐惧和焦虑。随访访谈用于探讨使用VRF的经验。大多数参与者报告了积极的感受,并建议让体验更加积极。

Topo等[ 30.]通过问卷调查来收集痴呆症患者的功能能力信息。通过访谈,收集现有音乐工具在安老院里安装2周后的使用情况和有用性数据。大多数参与者受益于它的使用,并有积极的体验。据报道,一些问题与触摸屏的灵敏度和字体大小受到限制,因为屏幕大小。

贾敏等人[ 28]使用了定性方法,参与者参与可用性测试,并在与 VENSTER.VENSTER的内容需要提供足够有意义的上下文,很有趣,适合参与者。Khosla等人的研究[ 13这是唯一一项使用定量方法的研究,参与者在与社交机器人互动时被观察,以获得情感、视觉和行为参与的见解。此外,使用用户调查来评估可接受性。参与者普遍对社交机器人持积极态度。大多数参与者对他们使用机器人的体验的感知有用性和乐趣给予了很高的评价。

开发及可行性及试验阶段(n=3)

共进行了3项研究,分别阐述了发展、可行性和试点阶段[ 18 25 27].这些研究系统地描述了痴呆症患者在每个阶段的参与情况:识别用户需求和愿望,确定设计,并通过试点测试或现场测试测试原型版本。对于每一项活动,都采用了广泛的方法,如焦点小组和访谈、研讨会和可用性测试。

在Span等人的研究[ 18],开发阶段包括面谈,以确定交互式网络工具的需求和喜好,以及小组讨论面谈的结果,并对所分享的问题和经验进行补充。确定了几个用户需求,例如社会联系、日常活动、关心、自主、参与和沟通,特别是针对决策过程。在焦点小组中讨论了纸上模型,以设计交互式原型。随后,组织了个别用户测试,以收集关于交互原型的设计、内容和用户友好性的反馈。一些与会者认为很难对纸质模型作出评论,但总的来说,每一屏幕的信息和屏幕的数量应该减少,语言的准确性是重要的。在可行性和试点阶段,我们对一个交互式原型进行了现场测试,以获得关于该工具的用户友好性、参与者的满意度以及他们如何评价该工具的决策。

马丁等人[ 27]在发展阶段通过访谈来确定夜间出现的主要问题、风险和护理需求。会议的主题包括促进独立、维护尊严、最大限度地提高社会包容性、管理风险和提供刺激。在可行性和试验阶段,参与者通过技术系统使用和访问参与了原型迭代验证和评估的3个阶段中的任何一个。这些阶段包括稳定性、可用性和完整的远程通信系统的集成测试,以及音乐和灯光的实现。参与者喜欢夜间系统的移动组件和方便的导航。

戴维斯等人[ 25]通过访谈和研讨会来确定用户在开发阶段认知强化的特定领域的需求。参与者确定了以下方面:记忆、保持社会联系、进行日常生活活动和增强安全感。在可行性和试点阶段,访谈伴随着实地测试。在尝试了4个原型后,参与者强调了个性化、更简单的功能和在家庭环境中的扩展使用的需求。

评估阶段(n = 1)

一项研究通过对照试验对人们进行评估[ 12].参与者使用辅助系统并填写测试后问卷来评估影响。尽管对影响没有显著影响,试验后的访谈和焦点小组被用于评估定性影响,参与者发现该系统非常有用,但不友好,因为技术困难,包括触摸屏的无响应性和获取访问的问题。对于以前从未使用过触摸屏的人来说,这个系统被认为是不直观的。

痴呆症患者的参与 对已开发技术的影响

除5项研究外[ 13 15 19 20. 25],研究人员直接反思了痴呆症患者参与基于技术的干预的发展。研究人员得出结论,在整个发育过程中让痴呆症患者参与进来是必要和可行的。此外,Kerkhof等[ 26]认为,仅通过护理人员或工作人员的参与来满足痴呆症患者的需求是不够的。这一点得到Meiland等人的进一步支持[ 24和Lopes等[ 22]他发现,从不同利益相关方(包括痴呆症患者)的角度探索用户的观点,对于理解问题并提出可能的解决方案是必要的。贾敏等人[ 28]还强调,与所有利益相关者共同设计可以使整体体验更愉快,也更有意义,因为它允许用户保持在决策过程的中心,并可以在新的见解出现时进行适应。在几项研究中,人们认识到痴呆症患者仍然是研究和新服务设计中最受排斥的群体之一[ 6 21].可能的原因可能是招聘困难或痴呆症患者认知障碍[ 16 29].然而,尽管存在这些挑战,所有的研究都建议痴呆症患者参与未来的研究,因为这可能导致获得对新概念或技术想法的看法,并对设备的可用性和用户友好性获得更具体的反馈。例如,一项研究在收到反馈后决定如何最大化网站对痴呆症患者的适用性[ 17].另一项研究调整了机器人的外观,使其更具社交互动能力。 16].最后,痴呆症患者建议,通过在工具中加入回忆功能,可以改善最终用户与虚拟现实系统之间的交互[ 14].

对痴呆症患者的影响

参与对痴呆症患者自身的积极影响包括参与的赋权效应,这在增加幸福感、能够发表意见、通过使用技术学习一项新技能以及大多数参与者所体验到的控制感增强等方面表现得很明显[ 6].参与者也被激励为研究和未来痴呆患者更好的生活质量做出贡献[ 18 26].在任何研究中都没有报告痴呆症患者的苦恼或不良事件。

PPI磋商的成果

PPI小组成员思考了如何优化参与研究和基于技术的干预措施的开发,并批准了指南( 多媒体附录3) [ 6 12 18 21 23 26- 28 30.].对一些指导方针进行了补充,例如,成员们一致认为,研究人员需要关注研究参与者的个体,这包括对他们的痴呆症类型、任何其他相关情况的认识,以及参与者的任何专业知识,这些可以进一步支持技术的发展。参与者对参与的相关性和积极影响的认识也很重要。

一个友好的研究环境有助于让人们在遇到不理解的问题时感到舒服地提出问题。这在开发新技术时尤其有帮助,因为新技术可能包含一些未知的方面,因此研究人员也应该尽量避免缩写和首字母缩写,以避免技术相关的行话。此外,PPI小组成员建议,研究人员应该在实际研究活动开始之前在PPI会议上展示他们的材料,以确保术语的使用受到限制。

尽早让痴呆症患者参与开发过程和开发的多个阶段,应该会增加对技术的熟悉度和更好的理解。成员们也积极鼓励技术开发人员直接与痴呆症患者互动,但强调需要一个调解人(如研究人员)来确保痴呆症患者和开发人员之间的良好理解水平。一位痴呆症患者还提到将一项技术带入社区(例如,记忆café)以收集反馈,因为这将允许该技术在现实生活中使用。

最后,一个 绿野仙踪方法是由研究人员建议的,参与者与工作的原型互动,但在一个看不见的研究人员的指导下。2位有痴呆症的PPI小组成员提到,从伦理角度来说,他们不会有问题,认为这是一个好主意。这种方法可以用来限制误差的数量。

讨论

讨论部分包括叙事综合的第三个元素:探索研究内部和研究之间的关系。

研究结果的总结和解释

痴呆症患者可以有效地为技术发展做出贡献,但经常被排除在该领域的研究之外。随着创新技术的兴起,有必要对目前有关痴呆症患者参与的证据进行概述,并就如何优化开发过程中的这种参与提出建议。这是为了确保所开发的技术是适合的,并且是针对最终用户的需求量身定制的。这是第一篇叙事综合综述,综合了痴呆症患者参与开发基于技术的干预措施的高质量研究的结果,并基于以下总结的证据创建了最佳实践指南。

这篇综述的优势之一是严格的纳入标准,导致高质量的论文的合成。这进一步支持了研究结果和制定的准则的稳健性。此外,在这一系统综述中叙事综合的应用允许高度系统的方法来搜索和理解证据。支撑理论,作为叙事综合的第一个元素的一部分,有助于定义研究问题和研究纳入本综述。此外,初步综合支持了调查结果的制表,这在文本、表格和图表中突出显示。通过寻找研究内部和研究之间的关系,这种方法在将证据转化为最佳实践指南方面也被证明是有帮助的。好的参与案例被提取并纳入到指南中,根据PPI组的输入对指南进行修改。这使有生活经验的人能够对调查结果提出宝贵的看法,并有助于加强综合的健壮性和指南的相关性。

研究结果表明,痴呆症患者的参与程度因其发展阶段和使用的方法而异,这与之前的研究一致[ 4].让痴呆症患者参与的很大一部分工作围绕着识别用户的需求和偏好。大多数研究都将这方面纳入研究,主要采用定性方法,如焦点小组和访谈。对需求的识别通常有助于优先处理痴呆症患者最紧迫的问题。

另一个组成部分是收集关于设备未来或现有设计的反馈。这些活动大多包括定性方法,同时使用观察和问卷调查。痴呆症患者在表达他们的意见和尝试可用的原型方面发挥着积极的作用。一旦一项技术被开发成更精致的版本,痴呆症患者的参与就会更多地转变为参与者成为研究对象。在几项研究中,痴呆症患者被要求在现场测试阶段更严格地使用一项技术,并在测试阶段后给予反馈。有趣的是,在实施阶段没有研究涉及痴呆症患者的参与。

这些发现与Span等人的研究结果一致。[ 4].然而,在这篇综述中,我们发现一些研究更详细地描述了痴呆症患者的参与情况,并证明将他们纳入整个发展过程而不是单个阶段是可行的。痴呆症患者的参与始于探索他们的需求,并获得对当前问题的理解,这导致了与痴呆症患者一起开发和测试各种原型,以适应他们的需求。这些研究应用各种方法,从痴呆患者身上获得深入的数据,为今后的研究树立了良好的榜样。参与的影响也很明显,因为研究提供了痴呆症患者反馈的具体例子,这改进了已开发的技术。然而,参与对个人本身也有影响,因为一些研究表明,痴呆症患者的参与可以增强力量,并导致幸福感的增加[ 6].与会者表达了发表自己的意见,为研究作出贡献的重要性[ 4 6 26].没有一项研究指出痴呆症患者的参与会带来任何痛苦。这对未来的研究是有帮助的,因为试验不发达技术所带来的预期痛苦被视为不将痴呆症患者纳入研究的一个原因。 19].

一些挑战被描述为痴呆症患者的参与,如获得社会期望答案的风险[ 21 29].然而,这种风险并不是针对这一人群的,一般来说,在研究中并不罕见。另一个挑战是从参与者那里获得深入的反馈,因为使用与技术相关的不熟悉术语会让参与者难以理解问题[ 30.].贾敏等人[ 28]强调需要多个利益相关者的参与,但承认这增加了设计过程的复杂性,因为研究人员或开发人员将不得不导航各种不同的意见。尽管存在这些挑战,所有的研究都建议痴呆症患者应该参与技术开发,并尽可能让相关利益相关者参与进来,如正式的护理人员和技术开发人员。

最佳实践指南(叙事综合元素4:评估综合的稳健性)

基于本综述中包括的研究结果和PPI会商会议的贡献,制定了痴呆症患者参与基于技术的干预的最佳实践指南( 多媒体附录3).Di lororito等人此前在系统综述中纳入的最佳实践模型[ 35]作为一个例子,以便根据参与的目标、准备工作和PPI咨询会的贡献更好地组织调查结果。根据是否完全满足(分数=2)、部分满足(分数=1)或未满足(分数=0),可以为每个指导方针分配分数。12份指南的可用性意味着可以达到24分的总分,这表明在为痴呆症患者开发基于技术的干预措施时,已经完全满足了每一份指南。

在参与之前具备适当的先决条件可以帮助克服挑战并优化痴呆症患者的参与。当涉及到参与者时,优先考虑他们的福祉,并确保他们意识到他们参与的目的和相关性,这有助于促成愉快的研究体验[ 6 21].这篇综述的发现和PPI小组成员的建议都强调需要熟练的研究人员和舒适的研究环境。研究人员需要花时间去了解参与者,PPI小组成员补充说,研究人员在参与研究之前应该了解痴呆症患者的任何专业知识。这可以加强他们的贡献,并且很容易使他们成为合作研究人员。此外,确定参与的目标和在开发过程中最适合的地方,将有助于避免浪费痴呆症患者的时间[ 27].

与此相一致的是,需要考虑多种参与方法以获得最优反馈,并且在可能的情况下,应该包括多个开发阶段。PPI小组成员证实了这一点,除此之外,痴呆患者的早期参与被认为是有帮助的,因为这也有助于确定他们自己的需求和技术想法。后者在本综述中包括的一些研究中是至关重要的,在这些研究中,痴呆症患者参与了需求评估,并在转移到原型开发之前优先考虑功能改善领域。我们也建议让所有相关利益相关者参与进来,并允许他们之间的互动,以从多个用户角度获得全面的观点,同时也让痴呆症患者成为研发团队的一部分[ 26 28].

在痴呆症患者的参与过程中,如果参与者能够学习到一项涉及技术的新技能,研究体验将进一步增强[ 6 18].这可以增加动力和赋权感。此外,使用适当的术语有助于获得有意义和更深入的答案[ 30.].技术在评估其影响时,必须达到可接受的稳定性和可靠性标准[ 12].这可以帮助避免参与者受挫,并避免错过重要的反馈。PPI小组成员一致认为,在测试过程中使用功能设备会更有用,并补充说,如果适用,该技术应该与不同的平台兼容(例如,计算机或移动电话)。不过,委员们也反思了一下 绿野仙踪方法和想法,一个看不见的研究人员在远处操作设备,而痴呆症患者将与它互动。在不适合基于纸张的原型和无法获得完整功能的原型的情况下,这种方法可能是一种很好的替代方法。在参与之后,建议让参与者了解新技术的进一步开发或实现的最新情况。

图3包括一个逻辑模型的基础上发现从这个审查和最佳实践指南。它描述了痴呆症患者缺乏参与技术开发的当前问题,以及如何通过关键的干预改变技术来补救这一问题,例如设置参与目标和使用适当的方法。这将带来重要的短期和长期成果,包括更多有用的技术和降低痴呆症护理成本。

优化痴呆患者参与开发基于技术的干预:逻辑模型。

限制(叙事综合元素4:评估综合的稳健性)

这篇综述中很少有研究涉及技术发展的多个阶段的痴呆症患者。此外,尽管这篇综述没有关注痴呆患者的被动参与(如大规模rct),但很少有研究考虑到影响评估和随后的反馈共享,如Hattink等人的研究[ 12].最后,没有研究发现在开发的实施阶段包括痴呆症患者的参与。

参与开发过程的定义部分基于以前的研究,因此只包括痴呆症患者在开发过程中发挥积极作用或能够提供反馈的研究。这可能导致其他可能相关的研究被排除在外,这些研究通过其他方法涉及痴呆症患者,这是本综述的一个局限性。另一个限制是只关注英文同行评议的期刊论文,这可能会导致排除其他潜在的相关内容。

未来的研究

为了开发更有针对性的技术,并探索痴呆患者在其他阶段可能发挥的作用,未来的研究应该扩大痴呆患者的参与水平。痴呆症患者应该成为研究团队和研究的共同研究者或顾问,并成为研究团队和研究的组成部分。这将使同一组患有痴呆症的人能够从开发的早期阶段(例如,制定问题)到中期和末期(例如,设计和实现)始终如一地提供反馈。考虑到缺乏针对实施阶段的研究,未来的研究应该探索痴呆症患者在新技术实施和传播中的作用。此外,在大多数研究中,研究人员往往充当痴呆患者和技术开发人员之间的调解人。然而,未来的研究可能旨在促进两者之间的直接知识转移,以便技术开发人员获得原始反馈。

结论

随着时间的推移,研究对痴呆症患者进行了更严格的技术开发;然而,技术仍然需要更适合痴呆症患者的需求和偏好。为了做到这一点,痴呆症患者需要在技术的发展中发挥积极作用,这样他们才能有机会表达自己的想法和意见。这篇叙述综合综述表明,痴呆症患者在从讨论和评论到尝试和测试的整个开发过程中扮演更积极的角色是可行的。痴呆症患者的参与与几个好处有关,即,更好和更有用的技术的发展,对技术的更好吸收,以及使用技术的意愿的增加。此外,基于证据的最佳实践指南被PPI小组成员认为是相关的,并将帮助支持未来的研究人员、技术开发人员和痴呆症患者在开发技术时优化参与( 文本框2).这不仅将确保未来以技术为基础的干预措施是合适的,而且还将使痴呆症患者通过对一般技术开发和研究作出有效贡献而感到赋权。

让痴呆症患者参与技术开发的最佳实践指南摘要。

准备参与:

通过创造一个友好的环境,让参与者有积极的体验,在那里人们可以提问并感到支持

让不同的涉众和用户参与进来,收集一系列的反馈和观点

确保所有参与的实际操作都到位,以满足参与者的需求

应该让参与者意识到他们参与的目的和相关性,以满足他们的期望,并鼓励诚实的反馈

探索收集反馈的可用方法,并选择最适合参与目标的方法

实践的参与:

提问时使用适当的术语和词汇,以促进理解并获得更深入的反馈

为参与者提供学习新技能的机会,通过他们的参与来提高福祉和赋权

在整个开发过程中让参与者参与进来,以创建更适合广泛采用的技术

在参与者参与后,让他们了解最新的技术发展和实现情况

纳入研究的主要特征。

纳入定性研究的方法学质量。

痴呆症患者参与开发基于技术的干预的最佳实践指南。

缩写 CASP

关键评估技能课程

CeHRes

电子健康研究中心

CINAHL

护理及相关健康文献累积索引

EMBASE

摘要介绍数据库

MEDLINE

在线医学文献分析与检索系统

MRC

医学研究委员会

PPI

患者和公众的参与

普洛斯彼罗

国际前瞻性系统评论登记册

个随机对照试验

随机对照试验

多联机

虚拟现实森林

作者要感谢诺丁汉心理健康研究所PPI小组成员,他们花时间审阅了这项研究的发现,并提供了必要的反馈。作者也要感谢Emma Young(信息专家,Duncan Macmillan和Rampton员工图书馆和精神卫生研究所)在定义搜索策略和运行本综述的第一个试点搜索方面的支持。本文中提出的研究是作为玛丽·居里创新培训网络行动的一部分,H2020-MSCA-ITN-2015,资助协议编号为676265。

HR和MO为这次审查开发了研究问题。MO在整个检讨过程中提供监督和指导。HR进行了搜索,筛选资格,数据提取,PPI咨询,并起草了论文。AB、LY和JS支持资格筛选和数据提取。所有作者已阅读并认可最终论文。

没有宣布。

王子 Wimo 一个 Guerchet 阿里 G Y Prina 2015年世界老年痴呆症报告。痴呆症的全球影响:患病率、发病率、成本和趋势分析 阿尔茨海默病国际 2015 2018-11-10 https://www.alz.co.uk/research/WorldAlzheimerReport2015.pdf 吉布森 G 牛顿 l 普里查德 G T Brittain K 罗宾逊 l 为英国痴呆症患者提供辅助技术产品和服务 痴呆(伦敦) 2016 07 15 4 681 701 10.1177 / 1471301214532643 24803646 1471301214532643 达克 上海 拉· 马奥尼 DF 长期护理技术 Res Gerontol孕育 2010 01 3. 1 61 72 10.3928 / 19404921-20091103-01 20128544 PMC3622259 跨度 Hettinga Vernooij-Dassen Eefsting J 史密特 C 使痴呆症患者参与支持性IT应用程序的开发:系统审查 老龄化Res牧师 2013 03 12 2 535 51 10.1016 / j.arr.2013.01.002 23318684 s1568 - 1637 (13) 00003 - 2 Orpwood R 请你的 J 克罗夫特 D Sixsmith 一个 托灵顿校区 J 吉布森 G G 设计技术以支持痴呆症患者的生活质量 抛光工艺Disabil 2007 19 103 12 10.1007 / s10209 - 009 - 0172 - 1 汉森 E 所以马格努松 l Arvidsson H Claesson 一个 Keady J 诺兰 与早期失智症患者及其家属合作,设计一项以科技为基础的方便使用者的支援服务 痴呆 2007 08 1 6 3. 411 34 10.1177 / 1471301207081572 罗宾逊 l Brittain K 林赛 年代 杰克逊 D 奥利维尔 P 每天保持联系(KITE)项目:与痴呆症患者及其照顾者开发辅助技术,以促进他们的独立性 Int Psychogeriatr 2009 06 21 3. 494 502 10.1017 / S1041610209008448 19193255 S1041610209008448 阿斯苔来说 一个 Alm N 延命菊 G 埃利斯 染料 R 沃恩 P 让老年痴呆患者和他们的照顾者参与设计基于计算机的支持系统:一些方法上的考虑 大学访问Inf Soc 2008 5 29 8 1 49 58 10.1007 / s10209 - 008 - 0129 - 9 克雷格 P 迪耶普 P 麦金太尔 年代 米奇 年代 拿撒勒 Petticrew 医学研究委员会指南 制定和评估复杂干预措施:新的医学研究理事会指南 Br地中海J 2008 09 29 337 a1655 10.1136 / bmj.a1655 18824488 PMC2769032 范Gemert-Pijnen Nijland N 凡林堡 Ossebaard HC Kelders SM Eysenbach G Seydel 改善电子卫生技术的吸收和影响的整体框架 J医学网络杂志 2011 12 5 13 4 e111 10.2196 / jmir.1672 22155738 v13i4e111 PMC3278097 Popay J 罗伯茨 H Sowden 一个 Petticrew 时候 l 罗杰斯 系统评论中叙事综合的指导 2006 01 英国兰开斯特 兰开斯特大学 Hattink BJ Meiland FJ Overmars-Marx T 德布尔 Ebben PW 范Blanken Verhaeghe 年代 Stalpers-Croeze Jedlitschka 一个 电影 SE V / D Leeuw J Karkowski RM 痴呆症护理的电子、个性化罗塞塔系统:探索其用户友好性、实用性和影响 残疾康复援助技术 2016 11 1 61 71 10.3109 / 17483107.2014.932022 24989993 科斯拉 R K 居家养老中人-机器人参与及可接受性 Int J Hum-Comput交互 2016 12 27 33 6 510 22 10.1080 / 10447318.2016.1275435 鹤嘴锄 W 琼斯 C Dwan T 彼得罗维奇 T 虚拟现实森林对痴呆患者的疗效:混合方法的初步研究 老年病学家 2018 05 8 58 3. 478 87 10.1093 / / gnw270表示“老人” 28329867 3072156 鹤嘴锄 W 琼斯 C Dwan T Ownsworth T B 使用网真进行社会连接:来自混合方法试点研究的老年痴呆症患者、家庭和卫生专业人员的观点 老化失去健康 2019 12 23 12 1643 50 10.1080 / 13607863.2018.1509297 30450924 女王 R Huq R Mihailidis 一个 老年痴呆患者的日常活动表现:辅助机器人的作用 IEEE Int Conf Rehabil机器人 2013 06 2013 6650405 10.1109 / ICORR.2013.6650405 24187224 弗里曼 艾德 克莱尔 l Savitch N 鲁瓦扬 l 利特 R 林赛 改善早期痴呆患者的网站可访问性:初步调查 老化失去健康 2005 09 9 5 442 8 10.1080 / 13607860500142838 16024403 VHX314710K76G51U 跨度 Hettinga Groen-van de Ven l Jukema J 詹森 R Vernooij-Dassen Eefsting J 史密特 C 让痴呆患者参与开发共享决策的交互式网络工具:参与式设计方法的经验 Disabil Rehabil 2018 06 40 12 1410 20. 10.1080 / 09638288.2017.1298162 28286969 Orpwood R 请你的 J 克罗夫特 D Sixsmith 一个 托灵顿校区 J 吉布森 G G 设计技术提高痴呆症患者的生活质量:用户主导的方法 大学访问Inf Soc 2009 10 27 9 3. 249 59 10.1007 / s10209 - 009 - 0172 - 1 克莱因 P Uhlig H 使用Haptic和VR人工制品丰富痴呆患者的回忆治疗 技术 2018 11 13 6 4 104 10.3390 / technologies6040104 鲍曼 Nygard l 罗森博格 l 用户和专业人员在为痴呆症患者设计一个易于使用的可视电话过程中的贡献 残疾康复援助技术 2014 03 9 2 164 72 10.3109 / 17483107.2013.769124 24512219 洛佩斯 P 皮诺 Carletti G 哈米迪 年代 Legue 年代 Kerherve H Benveniste 年代 Andeol G Bonsom P Reingewirtz 年代 ·里歌德交谈 一个 创新辅助装置的共同构思过程,以跟踪和寻找错位的日常物品的老年人认知障碍:Trouve项目 IRBM 2016 04 37 2 52 7 10.1016 / j.irbm.2016.02.004 麦凯布 l 英纳斯 一个 支持痴呆症患者的安全行走:用户参与新技术的开发 Gerontechnology 2013 12 1 4 15 10.4017 / gt.2013.12.1.006.00 Meiland FJ Hattink BJ Overmars-Marx T 德布尔 Jedlitschka 一个 Ebben PW Stalpers-Croeze 2 电影 年代 van der Leeuw J Karkowski 知识产权 RM 让终端用户参与为有轻度至重度认知问题的人设计辅助技术;欧洲罗塞塔计划 Int Psychogeriatr 2014 05 26 5 769 79 10.1017 / S1041610214000088 24507571 S1041610214000088 戴维斯 R 纽金特 C 唐纳利 Hettinga Meiland F Moelaert F 马尔文尼 本特松 J 克雷格 D R 一种用户驱动的方法来开发认知假肢,以解决轻度痴呆患者未满足的需求 普遍的暴徒第一版 2009 06 5 3. 253 67 10.1016 / j.pmcj.2008.07.002 Kerkhof YJ Rabiee F Willems CG 使用记忆的经验有助于组织和支持痴呆患者的小规模团体住宿的日常活动 痴呆(伦敦) 2015 09 14 5 633 49 10.1177 / 1471301213504210 24339118 1471301213504210 马丁 年代 奥古斯托。 JC McCullagh P 卡斯韦尔 W H H 华莱士 J 马尔文尼 参与性研究设计一种新型远程医疗系统,以支持痴呆症患者的夜间需求:夜间 国际环境保留区公共卫生 2013 12 04 10 12 6764 82 10.3390 / ijerph10126764 24304507 ijerph10126764 PMC3881140 雅明 G Luyten T Delsing R 布劳恩 年代 共同创造VENSTER界面的过程,VENSTER是一个为老年痴呆疗养院居民设计的互动艺术品 残疾康复援助技术 2018 11 13 8 809 18 10.1080 / 17483107.2017.1385102 29037109 Meiland FJ Bouman 人工智能 Savenstedt 年代 Bentvelzen 年代 戴维斯 RJ 马尔文尼 医学博士 纽金特 CD Moelaert F Hettinga 本特松 RM 一种新型电子辅助装置对社区轻度痴呆患者的可用性 老化失去健康 2012 16 5 584 91 10.1080 / 13607863.2011.651433 22360649 威尼斯平底渔船 P 真希 O Saarikalle K 克拉克 N 贝格利 E 卡希尔 年代 Arenlind J Holthe T Morbey H 海斯 K 吉尔兰德 J 对痴呆症患者的基于音乐的多媒体程序的评估 痴呆 2004 3. 3. 331 50 10.1177 / 1471301204045164 CASP清单 关键评估技能项目 2019-05-29 https://casp-uk.net/casp-tools-checklists/ 贝利斯 一个 柯里 l 麦金托什 T Bazian l 加拉格尔 R 沃森 输液治疗标准:快速证据回顾 皇家护理学院 2016 2018-09-14 https://www.rcn.org.uk/-/media/royal-college-of-nursing/documents/publications/2016/december/005702.pdf?la=en 波动 上海 黑色的 N 为评估卫生保健干预的随机和非随机研究的方法学质量创建检查表的可行性 流行病学,社区卫生 1998 06 52 6 377 84 10.1136 / jech.52.6.377 9764259 PMC1756728 麦克德莫特 O Crellin N 里德尔 Orrell表示 音乐治疗痴呆:叙事综合系统综述 老年精神病学 2013 08 28 8 781 94 10.1002 / gps.3895 23080214 di Lorito C Birt l 波兰 F Csipke E 戈夫 D Diaz-Ponce 一个 Orrell表示 对潜在脆弱成年人的同行研究证据的综合:这与痴呆的关系 老年精神病学 2017 01 32 1 58 67 10.1002 / gps.4577 27633160
Baidu
map