JFR JMIR表格规定 形成性研究 2561 - 326 x 卡塔尔世界杯8强波胆分析 加拿大多伦多 v6i12e40021 36542435 10.2196/40021 原始论文 原始论文 心脏衰竭自我管理语音应用程序设计:概念验证实施研究 Mavragani 孤挺花 Zhaopeng Madujibeya Ifeanyi 野蛮的 安东尼娅 德文 1
数字治疗中心 Techna研究所 大学卫生网络 多伦多总医院- RFE大楼4楼 伊丽莎白街190号 多伦多,ON, M5G2C4 加拿大 1 416 340 4800 ext 4765 antonia.barbaric@mail.utoronto.ca
2 3. https://orcid.org/0000-0002-8271-2030
Munteanu Cosmin 博士学位 4 5 https://orcid.org/0000-0002-0635-9124 罗斯 希瑟 马里兰州MHSc 6 7 8 https://orcid.org/0000-0003-4384-3027 Cafazzo 约瑟夫一 彭博士 1 2 3. 9 10 https://orcid.org/0000-0002-3114-4440
数字治疗中心 Techna研究所 大学卫生网络 在多伦多 加拿大 卫生政策、管理和评价研究所 达拉拉纳公共卫生学院 多伦多大学 在多伦多 加拿大 生物医学工程研究所 多伦多大学 在多伦多 加拿大 传播、文化、信息和技术研究所 多伦多大学 米西索加, 加拿大 优雅老化技术实验室 多伦多大学 在多伦多 加拿大 泰德·罗杰斯心脏研究中心 大学卫生网络 在多伦多 加拿大 医学系 多伦多大学 在多伦多 加拿大 彼得蒙克心脏中心 大学卫生网络 在多伦多 加拿大 计算机科学系 多伦多大学 在多伦多 加拿大 人的因素 Techna研究所 多伦多大学 在多伦多 加拿大 通讯作者:Antonia Barbaric antonia.barbaric@mail.utoronto.ca 12 2022 21 12 2022 6 12 e40021 13 6 2022 22 9 2022 13 10 2022 26 10 2022 ©Antonia Barbaric, Cosmin Munteanu, Heather Ross, Joseph A Cafazzo。最初发表于JMIR Formative Research (https://formative.www.mybigtv.com), 21.12.2022。 2022

这是一篇开放获取的文章,根据创作共用署名许可协议(https://creativecommons.org/licenses/by/4.0/)的条款发布,允许在任何媒介上不受限制地使用、分发和复制,前提是正确引用了首次发表在JMIR Formative Research上的原创作品。必须包括完整的书目信息,https://formative.www.mybigtv.com上的原始出版物的链接,以及此版权和许可信息。

背景

语音用户界面在医疗保健领域越来越普遍,通常用于患者参与。人们对识别这种形式的界面在慢性疾病管理中对患者参与数字疗法(DTx)的潜力越来越感兴趣。根据现有的研究,通过替代交互模型使DTx可用也有可能更好地满足一些患者的需求,例如老年人和有身体和认知障碍的患者。

客观的

这项研究旨在评估心力衰竭的参与者如何与语音应用程序版本的DTx互动, 地中海,通过概念验证实现研究设计。目的是了解语音应用程序是否能使参与者成功地与DTx互动,重点是可接受性和可行性。

方法

采用混合方法并行三角测量设计,以更好地了解使用的可接受性和可行性 地中海在4周的时间里,研究参与者(N=20)使用了语音应用程序。定量数据包括参与水平、准确率和问卷调查,使用描述性统计进行分析。定性数据包括半结构化访谈,并使用定性描述方法进行分析。

结果

总体平均参与度为73% (SD为9.5%),在第1周和第4周之间下降了14%。最大的差异是年龄最大和年龄最小的人群的平均参与水平,分别为84%和43%,但这些结果并不显著- kruskal - wallis检验,H(2)=3.8 ( P= .14点)。的 地中海语音应用程序的总体准确率为97.8%,并成功地将数据发送到诊所。从可接受度的角度来看,语音应用程序排在第80百分位,总体而言,用户觉得语音应用程序不是很多工作(在李克特7分制中平均为2.1分)。然而,用户是否会在未来使用它的总体平均分下降了13%。主题分析发现:临床整合的主题可行性有2个子主题,即用户对语音应用的对话风格的适应程度和设备的不可靠性;主题语音应用的接受度有3个子主题,即设备与家庭和用户生活的良好融合程度、用户在语音应用出现问题时自责、语音应用缺少特定的、理想的用户功能。

结论

总而言之,参与者大都成功地使用了 地中海语音应用虽然面临一些障碍,但证明了这样的应用程序是可行的,可以部署在诊所。我们的数据开始拼凑出这种技术可能最适合的患者档案,即那些年龄较大、日程灵活、对使用技术有信心,并且正在经历其他疾病的患者。

心脏衰竭 自我管理 数字疗法 语音技术 聪明的演讲者 形成性评价 移动电话
简介 背景

慢性疾病是全世界死亡和残疾的主要原因,每年有4100万人死于这些疾病[ 1].心肌梗死和高血压等心血管疾病是导致大多数与慢性疾病相关死亡的原因(1790万人)[ 1].在预防和管理慢性病方面,病人的自我照顾是必不可少的[ 2],因为研究已经表明这种方法的好处,包括改善健康结果,减少诊所就诊和降低医疗成本[ 3.].移动医疗是一种数字医疗技术,涉及使用移动设备进行医疗和公共卫生实践[ 4]并使自我护理支持融入病人的日常生活[ 5].移动健康应用程序是帮助慢性病患者在家管理健康的最受欢迎的工具之一[ 6].然而,将会话代理用于与健康相关的目的是一个新兴的研究领域[ 7],早期证据表明,它们也可能对慢性疾病的自我管理有效[ 8].

会话代理是人机交互领域的一种对话类型,可以是基于语音的,也可以是基于打字的[ 9].通过语音用户界面(VUIs),用户可以仅使用语音与计算系统进行交互。语音应用就是vui的一个例子。在任何环境中实现vui的主要优点是简单,因为它不需要用户与我们通常习惯的手持技术进行交互。vui如何在临床环境中使用的一些例子包括改善医生病历的转录,支持患者注册流程,改善患者对慢性疾病管理项目的参与,以及适当的老化[ 10].在家庭环境中,语音应用程序旨在帮助患者独立管理他们的慢性疾病[ 11- 15大多数情况下包括信息和辅助服务,如一般教育内容、提醒和跟踪工具。迄今为止传播的研究在支持最终结论方面效果有限,因为这些研究仍处于发展和试点阶段。因此,人们对研究使用语音应用程序鼓励患者参与的可行性越来越感兴趣,特别是在慢性疾病管理方面。

心脏衰竭

以前的研究已经开始调查声控技术监测心衰患者的可行性[ 16].心力衰竭是一种心血管疾病,发病时心肌受损或虚弱[ 17],使其难以泵出足够的血液来满足身体的需要[ 18].当这种情况发生时,液体会积聚在身体的各个部位(如腿和脚踝),造成肺部充血,并导致缺氧输送到身体其他部位[ 19].心衰的2个最常见原因是高血压和冠状动脉疾病;其他危险因素包括肥胖、吸烟、高胆固醇和既往健康状况(既往心肌梗死和出生时心脏缺陷)[ 20.].据估计,全世界有6430万人患有心衰[ 21].

迄今为止,研究使用语音应用程序进行心衰自我管理的潜力的研究有限。一些语音应用程序包括帮助患者管理病情的基本功能,例如询问预约前的临床筛查问题、安排预约和设置药物提醒[ 11 12].最近的其他研究则通过一系列与心衰相关的症状问题来调查使用语音应用程序来监测患者的病情[ 13 16].可行性是所有研究调查的结果,结果得出结论,研究如何将该技术用作管理心衰的替代平台是值得的。

地中海

地中海是一项以证据为基础的心衰自我管理计划,由大学卫生网络(UHN)开发,并作为UHN的泰德·罗杰斯心脏衰竭卓越中心诊所护理标准的一部分实施[ 22].该程序作为一个移动应用程序部署,患者每天使用手机访问它,记录临床相关的生理测量(体重、血压和心率)和hf相关症状。所有患者输入相同的测量值,并被问及相同的症状相关问题,尽管他们的心衰处于不同阶段。

地中海算法根据输入的数据和患者的病史(确定患者何时进入医院)为患者生成自动的自我护理信息 地中海程序)。的 地中海作为之前工作的一部分,该程序被部署为语音应用程序,并且在UHN心力衰竭诊所对语音应用程序进行了可用性研究[ 23].

目标

以前的可用性研究的目的主要集中在是否 地中海语音应用功能正常;收集语音应用程序设计反馈和用户体验数据。鉴于可用性研究是在受控的实验室环境中进行的,重点是语音应用程序的设计,我们试图在预期的环境中执行概念验证实现研究。的 地中海语音应用程序被用作案例研究,以调查语音应用程序在慢性疾病管理中的更广泛应用。这项研究的目标是确定语音应用程序是否可以成为一种实用的替代方案,使患者能够接受数字治疗。Proctor等人从实现框架(可接受性和可行性)中构建了2个结构[ 24引导我们的研究问题:通过使用智能音箱,为患者提供语音应用程序,作为家庭慢性疾病管理平台,其可接受性和可行性如何?如果研究结果得出的结论是,语音应用程序对患者来说是可以接受的,并且在现实环境中部署是可行的,那么将这项技术用于部署数字治疗,可以为患者提供多种与这些类型的程序交互的方式,从而为当前的护理模式带来好处。

方法 参与招聘

本研究要求心衰患者与心脏相互作用 地中海在他们家里安装语音应用,为期四周。的 地中海通过亚马逊Alexa设备访问语音应用程序;每个参与者在研究期间都有一个设备供他们使用。如果参与者被UHN的心衰诊所的医生诊断为心衰,并开了心衰治疗处方,他们就被认为符合条件 地中海程序。参与者还被要求有足够的英语口语和阅读能力,以理解对话中的语音提示 地中海应用程序。 地中海护士协调员首先向感兴趣的患者提供研究研究的简要概述,然后将他们介绍给研究协调员。如果他们同意参与,则在入职前由研究协调员获得书面知情同意。

鉴于本研究是作为概念验证而设计的,因此使用了小样本量来收集初步证据,为这种干预的成功提供了见解。根据初步研究提供的类似指导,共招募了20名参与者参与这项研究[ 25].在20名参与者中,7名(35%)是最近(在过去2个月内)入职的 地中海在研究进行的时候。的 地中海护士协调员建议,根据他们的经验,患者通常需要多长时间才能舒服地适应应用程序。

所有的参与者都被要求将他们的 地中海测量为期4周;更具体地说,他们被要求首先输入他们的 地中海在与语音应用程序交互之前,每位参与者都获得了一张礼品卡,以补偿他们参与研究的时间。

伦理批准

获得了UHN研究伦理委员会的伦理批准(20-6095)。

研究结果测量

评估 地中海语音应用受到Proctor等人的实施结果框架的影响[ 24通过关注两个结果,具体来说,可接受性和可行性。可接受性被定义为患者对药物的感知 地中海语音应用程序是令人满意或满意的,可行性是描述的程度 地中海患者可以成功使用语音app。

数据收集

数据通过三份问卷收集,即系统可用性量表[ 26]、美国航空航天局(NASA)-任务负荷指数(TLX) [ 27]、《技术接受与使用统一理论2》(UTAUT2) [ 28]和半结构式面试。从语音应用程序服务器检索有关语音应用程序听错和错误记录数据的频率的信息。在采访过程中,参与者被问及他们使用语音应用程序的总体体验和满意度。还收集了其他定量数据:参与水平(定义为用户使用语音应用程序输入数据的天数除以总研究持续时间- 28天)和准确率(通过比较智能手机应用程序上输入的测量值与语音应用程序上记录的测量值来计算)。使用以下数据来推断语音应用程序是否被用户认为是可接受的:参与水平、SUS和半结构化访谈;类似地,可行性是通过以下方式确定的:参与水平、准确率、NASA-TLX、UTAUT2(通过努力期望镜头)和半结构化访谈。

研究协调员通过电话与每位参与者进行了入职培训,以帮助他们设置和访问 地中海并为他们提供了一份使用说明书( 多媒体附件1).然后,参与者被问及一些关于他们使用技术的舒适度的问题,以帮助研究协调员了解他们对技术的舒适度( 多媒体附件2).随着 地中海智能手机应用程序是UHN护理标准的一部分,参与者被告知他们需要执行双重输入他们的 地中海为期4周的测量,并被告知优先考虑 地中海智能手机应用程序,即先在手机上输入测量值,并仅遵循智能手机应用程序的指导。半结构化访谈在第1周和第4周结束时进行,并与研究协调员通过电话进行。调查问卷在第2周和第4周结束时以电子方式发出,以便参与者有隐私,并能轻松地分享他们真实的想法和观点。

研究分析和统计检验

采用混合方法,三角计算收敛模型得出结论[ 29].使用Microsoft Excel计算并记录标准化问卷回答的描述性统计数据。我们还使用Microsoft Excel创建了用户粘性水平的图形表示。按照标准方案对SUS问卷的回答进行分析[ 26],并计算了NASA-TLX和UTAUT2问卷的总体和特定问题的平均值。数据使用不同的属性以不同的方式进行分类(年龄,是否最近登录到 地中海程序,他们是否有使用智能音箱的经验,以及对技术的适应程度)。考虑到数据特征,对SUS、NASA-TLX和UTAUT2的参与水平和分数进行了非参数统计检验(作为自变量处理);一个 P的值。05was used to indicate statistical significance.

对于定性数据,访谈记录由研究协调员(AB)进行分析和编码。访谈主题采用归纳定性描述方法确定[ 30.].一旦产生了这些主题,Proctor等人在实施结果框架的指导下(重点是可接受性和可行性结构)使用演绎方法对它们进行分类[ 24].文字记录和编码使用微软Word进行组织。由于本研究样本量较小,结果缺乏说服力和统计学意义,因此更注重定性分析,而采用定量数据和解释来支持定性结果。

结果 研究参与者的特征

研究共招募了20名患者,性别比例相当均衡(女性:9/ 20,45%;男性:11/20,55%),平均年龄57.8岁(标准差13.1岁)。参与者年龄均不小于20岁,10%(2/20)的用户年龄在21 - 40岁之间,35%(7/20)的用户年龄在41 - 60岁之间,55%(11/20)的用户年龄在61 - 80岁之间。

所有被招募的患者都被要求参加 地中海其中包括最近入职的学员(7/20,35%)和长期入职的学员(13/20,65%)。参与者还被问及他们对技术的舒适度,以及他们之前是否使用过智能音箱,90%(18/20)的用户提供了回答。在舒适度方面,18例患者中,1例(6%)患者非常不舒服,0例(0%)患者有点不舒服,6例(33%)患者一般,2例(11%)患者有点舒服,9例(50%)患者非常舒服。关于之前使用智能音箱的情况,18名患者中,7名(39%)表示他们之前使用过智能音箱,而其余的患者(n= 11,61%)则没有。

定量数据 用户粘性水平和准确率

在为期4周的研究期间,整个研究人群的总体参与度为73%,随着时间的推移,参与度明显下降( 表1),在比较第1周和第4周的平均粘性水平时,整体下降了14%。

4周研究期间的平均投入水平。

参与水平一个(%),平均值(SD) 平均遗漏天数(SD)
1 80.7 (11.3) 1.4 (0.11)
2 75.0 (5.8) 1.8 (0.06)
3. 70.7 (7.9) 2.0 (0.08)
4 67.1 (8.1) 2.3 (0.08)

一个总体平均用户粘性为73.4% (SD.9.5%)。

在4周的时间内(28天),9个条目(在411个条目中)是使用 地中海语音应用,总体准确率为97.8%。体重和血压测量的误差各不相同。一个子集(4/ 20,20%)的参与者无法成功提交正确的读数,这导致了记录的9个错误。

除了计算总体参与水平外,还计算了描述性统计数据,并使用前面提到的属性来比较研究人群中各个子组的结果。结果显示在 多媒体.虽然发现了一些趋势,但统计检验表明两组之间没有显著差异。

新入职员工(n2)和现有员工之间的平均参与度没有差异 地中海病人(n1;Mann-Whitney U=45, n1=13, n2=7; P= 0)。与涉及整个研究人群的结果类似,两组在第四周的参与度都低于第一周。平均投入水平随着年龄群体的增加而增加,最年长的人群(61-80岁)的投入水平最高,为84.1%,大约是研究- kruskal - wallis测试中最年轻年龄组的总体投入水平的两倍,H(2)=3.8 ( P= .14点)。61岁至80岁的人在4周的时间内最稳定,每周平均投入水平差异最小。

在比较参与者所描述的技术舒适度时,也观察到了类似的趋势(统计测试结果不显著)。那些非常自信的人在4周内比那些报告不太自信的人更多地使用这项技术,总体差异为13.6% (Mann-Whitney U=23.5, n1=6, n2=12; P=标识)。在从未与智能音箱互动的小组中,参与度也始终高于与智能音箱互动的小组,差异为7.6%(曼-惠特尼) U=38, n1=6, n2=12; P= .86)。随着时间的推移,两组人的参与度都在稳步下降,在第1周和第4周的平均水平之间存在类似的总体差异。

Medly Voice应用程序的可接受性

来自SUS问卷调查的结果与来自半结构化访谈的结果相结合,用于更好地了解使用语音应用程序版本的可接受性 地中海程序。

从第二周SUS问卷的回复中得出的总体平均得分为69分(满分100分),根据之前的研究,语音应用程序排名在第53百分位。相比之下,第四周的平均分为77分(满分100分),以以往的研究为基础,排在第80百分位。这些数据表明,在使用的满意度总体上有所提高 地中海语音应用(增加27%)。我们还计算了第2周和第4周之间每个问题的平均值差异,其中最后一个问题的差异最大,为13%。参与者认为,随着时间的推移,他们需要了解更多关于语音应用程序的知识,才能成功地与之交互(与NASA-TLX认知负荷结果一致)。在第2周和第4周的结果中,所有问题的响应分布相当相似(图S1) 多媒体附件4).

平均SUS评分也根据不同的患者特征(年龄、 地中海状态、舒适度以及与智能音箱互动的熟悉程度)。总的来说,所有特征的得分范围是相似的。然而,数据中最大的范围是在年龄组中确定的,最年长的(61-80岁年龄组)人口提供了最低的分数(72分满分100分),排名在第62百分位,而中年人口提供了平均87.5分(满分100分),排名在第96百分位。最年轻人群的平均得分为77.5分,排在第80百分位。Kruskal-Wallis检验结果无显著性差异- h (2)=0.89 ( P= .64点)。

Medly Voice App的可行性

本研究使用NASA-TLX问卷,以更好地评估研究参与者在使用时感受到的工作量 地中海在第2周和第4周的结果中,平均分数增加了4%,表明工作量略有增加。虽然每个问题的平均得分都很低,但与(1)成功率有关的问题;(2)完成这项任务需要付出多大的努力;(3)沮丧、恼怒和压力的感觉比其他问题得分更低。计算结果如图S2所示 多媒体附件4.参与者也觉得使用这种方法不太成功 地中海在研究结束时使用语音应用程序的时间比在第二周结束时使用的时间长(结果相差22%)。

在分析不同年龄组的得分时,发现与中年人(平均为1.61)和老年人(平均为2.12)相比,最年轻的人群认为自己最需要工作(最高平均为2.67);Kruskal-Wallis检验结果并非不显著- h (2)=0.039 ( P= .98)。人们还发现,那些新入职的人 地中海当使用语音应用程序时,程序感觉更匆忙,与那些使用语音应用程序的人相比,输入他们的测量结果时不太成功 地中海编程时间较长(每个问题的得分相差约15%);Mann-Whitney检验不显著( U=25.5, n1=12, n2=6; P= =收)。那些认为自己在持续使用科技产品时不太自信的人在每个问题上的平均得分都较低,这表明他们比那些认为自己很自信的人更困难;Mann-Whitney检验也不显著( U=11, n1=12, n2=6; P= 55;表S1 多媒体附件4).

总之,描述性统计数据显示,最年轻的年龄组认为他们最需要工作,随着时间的推移,研究人群普遍认为他们需要付出更多的努力,而那些对技术不太熟悉的人使用语音应用程序比那些更有信心的人更困难。

使用UTAUT2问卷是为了更好地了解参与者在使用语音应用程序时关于便利条件、努力期望、习惯和行为意图的想法。第2周和第4周结果之间的最大差异是关于他们是否会使用语音应用程序 地中海语音应用未来,平均分下降13%。年龄最大的人群最不愿意在未来使用它,而中年人群对未来的使用最有兴趣;Kruskal-Wallis检验结果无统计学意义- h (2)=1.88 ( P=点)。当被问及语音应用程序是否成为一种习惯时,之前使用过该技术的人比没有使用过该技术的人更同意(回答差异19%),尽管这项测试在统计上也不显著(Mann-Whitney) U=38, n1=7, n2=13; P= .86)。

总体而言,所有参与者都认为语音应用程序使用起来不费力,操作起来很容易。他们不太确定使用语音应用程序是否已经成为他们的习惯(这可以通过参与水平来支持),最不确定的是他们是否会在未来使用语音应用程序,如表S2所示 多媒体附件4

定性数据

Proctor等人利用实施结果对访谈主题进行分类[ 24],特别关注 可行性而且 可接受性构造来回答研究问题。主题(1)临床整合的可行性和(2)语音应用程序的可接受性将在后续章节中介绍,每个小节都有各自的配套子主题。

临床整合的可行性

临床整合的可行性受多种因素影响;在我们的研究结果中,两个子主题(1)用户适应语音应用程序的对话风格和(2)设备的不可靠性有助于确定这项技术必须集成到现有工作流程和实践中的潜力。用户是否能够适应语音应用程序以及设备被认为不可靠的程度将确定语音应用程序在临床环境中实际使用的可行性。关于这两个子主题的进一步细节将在随后的小节中提供。

用户适应语音应用程序的对话风格

大多数参与者发现设备的设置和说明相当简单,但有时很难成功地将他们的测量结果记录在设备上 地中海当参与者遇到困难时,他们会调整自己说话的方式,而不是继续保持自然的方式,希望语音应用程序能更好地理解他们:

我学会了如何适应她的节奏,而不是她适应我的节奏。

参与者04

研究人员使用了特定的策略来改变他们的说话风格,其中最常见的是改变他们说话的音量、语气、语速和风格。不同的策略似乎对不同的参与者更有效,特别是他们说话的速度:

现在我只说116.4磅(更快),她现在绝对没有任何问题。

参与者12

当然,我会确保直接对着它说话,或者提高我的声音或类似的事情。

参与者15

我想记录一百个,但通常说“一百个”而不是“一百个”,但我注意到它没有注意到这一点。

参与者17

一旦参与者在与语音应用程序说话时改变了谈话语气,他们就开始注意到互动中的困难,因为它不再像自然的对话:

这就像当你和外国人或者你认识的来自另一个国家或另一种语言的人交谈时,你试着说几句话让他们理解。

参与者12

我试着把每个词都分开说,就像我说话像机器人一样。

参与者18

我必须认真,缓慢,并确定我如何说这些数字。

参与者17

大多数参与者采用的另一种交互策略涉及使用设备的触摸屏功能。在大多数情况下,这种替代输入比使用语音更有利,因为它使用更简单,更重要的是,更快:

我养成了一种习惯,可以让我尽可能快地完成检查,这种习惯就是我会说出体重、血压和心率的结果,然后我直接在触摸屏上互动,告诉她症状,这样我们就不用等她了。所以,是的,每次我使用触摸屏时,它都很好,事实上,我可以使用触摸屏,即使她还没有说完,它也能工作,这对我来说是一个很大的加分项。

参与者15

研究发现,当参与者不同时处理其他项目时,互动是最成功的:

如果你真的想,你可以同时处理多项任务,但这就是我认为犯错更容易的原因。

参与者02

我知道过一段时间会被问到的问题,但我仍然在听。那是因为你知道我宁愿做对也不愿做错。

参与者08年

尽管大多数参与者经历了学习曲线,但前面描述的缓解策略支持部署语音应用程序的可行性,例如 地中海因为随着时间的推移,这些参与者表现出了让互动变得更容易的毅力。

装置不可靠

几乎所有参与者在与语音应用程序交互时都遇到了不同程度的困难。有时,语音应用程序会死机,会话突然结束;在其他时候,它不会为用户提供纠正任何错误测量的机会:

你可以回去修改,对,但是有时候会有点麻烦,所以我必须重新开始。

参与者02

然后她就关机了…When she couldn’t get the measurements or something, she would just turn off.

参与者04

参与者还描述了语音应用程序无法正确接收他们所说的信息的情况,这让他们感到沮丧、恼火、恐慌和沮丧,以至于他们当天不想再使用该设备:

是的,我醒来时心情很好,但经常会很沮丧,之后会变得暴躁。是的,这真的改变了我的心情。有一次她对我重复了一遍,我以为她听懂了,然后她又重复了一遍,说我晕倒了,但我没有晕倒,所以我慌了。

参与者18

当语音应用程序无法捕捉到正确的测量值时,参与者通常会觉得有必要大声说话。这被认为是有问题的,特别是在参与者可能感觉不舒服,没有能力表达他们的声音的情况下。据一位参与者解释,有了智能手机,他们就可以在不消耗太多精力的情况下分享信息:

当我进医院时,我不希望它不在我的手机上,我有一段时间说话困难。如果我的血压过高或者因为蓄水而过低,我就很难说话,我喜欢把手机扔给医生,说“看,这是我两天前的数据”……我真的很喜欢。

参与者18

尽管从患者交互的角度来看,语音应用似乎是可行的,但由于各种技术相关的原因,用户在与设备交互时也遇到了困难。了解这些故障的原因和频率将有助于确定何时何地适合使用语音应用程序 地中海

语音应用可接受性

这个主题描述了研究参与者发现 地中海语音应用满意。这种可接受程度不仅包括参与者的想法,还包括可能影响他们体验的其他因素,如以下子主题所述:(1)设备与家庭和用户生活融合得很好,(2)当语音应用程序出现问题时,用户会责怪自己,(3)语音应用程序缺少用户所需的特定功能。

家庭设备集成

除了使用该设备访问之外 地中海语音应用程序,许多参与者还发现他们在研究期间将其用于其他目的。在4周的时间里,一些参与者将该设备描述为同伴,其中一名参与者指出:

她变得像朋友一样。我知道这是一些小怪癖,特别是当它犯错的时候……我想说,对于那些独自生活的人来说,它可以成为一个朋友,对吧?

参与者08年

一些参与者还将他们与该设备互动的体验描述为“愉快的”,还有一些人特别觉得在与它交谈时需要使用礼仪和礼貌:

我和Alexa相处得很好。太可爱了。我在Medly上输入信息,同时我和Alexa一起做,最后我说“Alexa,谢谢你”,她说“当然”……一天晚上,我说,“哦,Alexa晚安”,她说:“晚安,睡个好觉。”

参与者08年

这款设备不仅成为了用户的伴侣,也成为了他们家人和朋友的伴侣:

那天晚上她确实给我孙女讲了个敲门的笑话。(孙辈们)和她一起玩得很开心,问她天气怎么样之类的问题。

参与者10

这种互动是一个例子,说明该设备可以很容易地融入家庭空间。而在公共区域,用户已经注意到使用该设备进行其他活动,例如:

我可以用它播放音乐,我还可以问问今天天气如何,早上第一件事就是看CTV新闻,我认为这很棒。

参与者02

在公共场所放置该设备也提醒了一些难以记住表演的参与者 地中海测量。其他人也提到,因为设备被放置在一个公共空间,他们会更倾向于使用 地中海:

看到柜台上的显示器,我觉得它肯定会鼓励我,激励我,这是一个视觉提醒,而不是手机上的应用程序真正去做。

参与者11

一开始我以为是我的手机。但你可能知道,现在是Alexa。她就坐在那里,所以可能是Alexa。

参与者02

一些参与者还把设备放在家里的其他地方,比如卧室。在这些情况下,他们也发现这种设置很有用:

我在晚上睡觉的时候用它,比如放松的音乐。

参与者06

此外,在某些情况下,语音应用程序比智能手机更受欢迎:

我在我的卧室里,房间里有浴室,所以当我去浴室称体重的时候,我会同时量血压。所以理想情况下,这就是我和(Alexa)交谈的地方……在过去的一周里,它一直在起作用,我真的很喜欢,因为我吃完药后就可以回去睡觉了,所以它不会让我的大脑醒来。

参与者03

我有点脑震荡的症状手机让我恶心所以目前,我更喜欢只用Alexa来做这件事。

参与者14

尽管该设备可以很好地集成在家庭的不同空间中,但在公共空间使用该设备可能存在缺点。大多数参与者都指出了拥有一个安静的空间来集中注意力并成功提交阅读材料的重要性:

说实话,就像我没有儿子的时候,我经常这样做,因为他喜欢在我面前说话……他会在我身后重复“Alexa”。

参与者18

比如,如果我丈夫在我做饭的时候走进厨房,我会把他赶走。

参与者08年
当语音应用程序出现问题时,用户会责怪自己

尽管一些参与者在设备突然停止工作或错误地听到他们的声音时感到沮丧,但通常情况下(尤其是在第一周),用户认为错误发生时是他们的错:

我并没有因此而生气。我只是想,哦,我说得不够清楚或不够大声,或者你知道。

参与者08年

我又回到了第一周的学习曲线。有一些挫折,但你不能怪Alexa,这都是我的错。

参与者05

这些反映表明,用户普遍理解语音应用程序,并在与之交互时具有一定的耐心。

缺少但需要的语音应用功能

参与者们分享了一些他们所看重的设备特性 地中海可以提供。特别是,用户更喜欢与速度快的设备交互,可以快速记录他们当天的数据。在某些情况下,用户比较了语音应用程序和蓝牙的功能,表明蓝牙是一个更快、更简单的过程:

整个过程真的很麻烦。我想部分原因是因为(智能手机)应用程序非常简单。我觉得如果我有蓝牙血压和体重秤就会更容易了。

参与者04

对我来说,说实话,因为他们想在早上看,所以智能手机要快得多。

参与者09年

大多数用户还表示担心,如果他们去过夜旅行,他们将如何使用语音应用。便携设备:旅行时需要并经常提到的一种小到可以随身携带的设备:

我唯一不喜欢它的地方是它又大又笨重,所以我不太愿意带着它旅行。所以,对我来说,如果我不得不依赖它,机动性问题会有点令人担忧。

参与者13
讨论 主要研究结果

本文介绍了使用混合方法为心衰患者设计的语音应用程序的概念验证实施研究的结果。据我们所知,这是第一个用于帮助患者在家中管理晚期慢性病的语音应用程序的评估。迄今为止,研究仅报道了在受控实验室环境下的准确性和可接受性水平;然而,这些发现仍然与本文的结果一致[ 11 14].尽管第四周的SUS得分高于第2周,但在研究开始和结束期间,参与度下降了14%。参与者认为他们需要在第四周使用比第二周更高的认知负荷(增加4%),关于他们是否会在未来使用它的平均评分下降了13%。97.8%的准确率表明参与者在大多数时候都能成功记录他们的测量结果,这可能导致了更高的SUS得分。一些定性的发现可能是参与度下降的潜在原因。特别是,从可行性的角度来看,该设备有时不可靠,用户必须工作(以不同的努力)来适应对话的流程。虽然在最初几周还可以忍受,但随着时间的推移,它可能会变得令人厌烦,这取决于用户适应的速度。同样,由于用户经常在出现错误时责怪自己,这可能会对语音应用产生负面影响,随着时间的推移,用户可能会开始感到不愿意使用它。

为了更好地理解语音应用程序的可接受性和实施的可行性,我们试图确定参与者之间在参与水平方面的任何显著差异。虽然我们的定量数据在统计学上不显著,但我们的观察结果与Ware等人的研究结果相似[ 31],即发现年龄较大的群体的参与程度最高,而年龄较小的群体的参与程度逐渐降低。这一发现也与其他研究相一致,这些研究特别关注老年人中基于语音的会话代理的使用[ 4 32- 37].尽管年龄最大的人群的参与度最高,但中年人群(41-60岁)的SUS平均得分最高,这表明他们对语音应用的接受程度最高。尽管我们无法根据这些观察得出明确的结论,但它为未来的工作提供了一个起点。

受访者在采访中给出的最常见回答之一是,语音应用程序需要很长时间才能完成,特别是比语音应用程序需要更长的时间 地中海用户经常描述自己早上匆忙出门的感觉,在这种情况下,他们很高兴能够使用智能手机应用程序快速输入自己的测量数据。这种生活方式和反应在年龄较大的人群中观察到的较少,他们在与语音应用程序交互时似乎更有耐心和理解力。也有一些特定情况下,语音应用程序实际上被证明比智能手机更有用。其中一名参与者出现了脑震荡症状,因此看屏幕的时间有限,所以语音应用程序对他们来说效果很好。另一名参与者经常感到疲劳,这是他们药物的副作用之一,并且在导航时遇到困难 地中海早上用智能手机应用。在这种情况下,他们也意识到使用 地中海其他参与者也有类似的感受,他们意识到,当他们以轻松、不费力的方式说话时,他们可以成功地记录下自己的读数。虽然这对一些参与者来说效果很好,但有一位处于类似情况的参与者却有不同的体验,特别是因为他们的声音微弱脆弱,当他们感到不适时,语音应用程序无法破译他们的语音。因此,为了更好地识别声音,特别是当用户在说话时无法发挥大量能量时,还需要进一步的改进。语音应用的其他研究也概述了类似的技术限制[ 15].

这项研究的结果还显示了该设备在许多家庭中的整合程度,以及这可能为参与者带来的潜在好处。由于该设备的多功能性,它迅速成为许多用户日常生活的一部分,从听音乐到询问晚餐食谱,甚至开始变成一个伴侣。该设备不仅提供了社会支持,而且还作为一种视觉提醒来执行他们的任务 地中海测量。有嘉宾指出,他们会更倾向于使用 地中海语音应用只是因为它在他们经常在家里的一个公共空间。因此,该设备在4周内自然地融入用户的生活,这表明它可能会让一些人更方便地执行他们的任务 地中海测量并可能鼓励和激励那些经常忘记的人。

这些发现有助于开始揭示这种技术最适合的患者人口统计的“概况”。我们怀疑那些老年人(年龄为>岁,60岁),对使用技术更有信心,日程安排不那么繁忙,在与语音应用程序交互时更轻松,更成功,并且一致。此外,那些患有多种疾病的人可以从使用这个平台中受益,特别是因为他们可能会因为他们的病情而经历常见的副作用。

与之前工作的比较

据我们所知,这项研究只是少数几项研究的一部分,这些研究调查了在预定环境中长时间(4周)使用语音应用程序治疗慢性疾病。同样,这项工作也是第一个研究语音应用程序的工作,该应用程序被设计为针对每个患者的个性化(输出响应取决于患者登录程序时设置的参数)。由Bérubé等人进行的系统综述[ 38]特别关注针对慢性健康状况的基于语音的对话代理,并发现只有2个语音应用程序被设计为针对HF的对话代理[ 39 40].这两项研究主要集中在语音识别的系统架构和准确性上,其中一项研究依靠智能手机来实现基于语音的助手。其他研究则通过初步评估,重点关注HF语音应用程序的接受度和可行性,例如基于在受控环境中进行的可用性研究的调查回复[ 11 12];所有这些研究的结果都显示了这项技术在慢性疾病管理领域的前景,特别是对心衰。最后,最近的两项研究调查了敬业度[ 13]及可行性[ 16延长使用期限(90天)。Apergi等人的研究[ 13]显示出与老年患者群体的更高参与度(与本研究结果相似),Shara等人[ 16]在他们的研究人群中报告了良好的感知和高舒适度。这项研究开始揭示语音应用程序平台对程序的潜力,例如 地中海,并为未来的工作提供了基础,以探索谁可能从这个平台中受益最大,以及为什么受益。

限制

在研究过程中发现了多种局限性,因此,应该认识到这一点,以便更好地理解研究结果的影响。

首先,由于有大量的问卷调查和访谈,研究团队注意到潜在的社会可取性偏差[ 41].因此,参与者被鼓励诚实地说话,并有机会通过问卷而不是通过电话私下透露他们的想法。其次,由于这项研究是在预期环境中对语音应用程序的概念进行验证,因此样本量没有统计学支持,大多数研究结果都是定性的。未来的工作应该设计具有统计意义的研究(包括使用经过验证的问卷来获取用户对技术的舒适度),以更好地了解这可能对谁最有利。第三,特定的研究因素可能会影响参与者的想法、经历和反馈。用户意识到研究的持续时间只有4周,因此,与要求他们使用语音应用程序更长时间相比,他们的参与度可能更高。参与者还被要求对他们的测量进行两次记录;如果用户只被要求使用语音应用程序,研究结果可能会有所不同。第四,由于纳入标准足够普遍,可以包括任何加入该项目的患者,在招募过程中可能会出现选择偏差。在这种情况下,研究中可能错过了包括更多不同人口统计数据的机会,尤其是那些主要讲英语以外语言的人。最后,由于这项研究的大多数参与者以前从未与智能音箱互动过,他们的想法和反馈可能受到了他们与新技术互动这一事实的影响。 As a result, their thoughts on the device itself could be reflected in their responses, even though any VUI device could have been used in the study.

结论

本研究采用混合方法来调查将语音应用程序用于慢性疾病管理的数字疗法的可接受性和可行性。总的来说,我们的研究结果表明,参与者在很大程度上成功地使用了 地中海尽管语音应用面临一些障碍,但这证明了这样的应用程序是可行的,可以部署在诊所中供未来使用。我们的数据开始拼凑出这种技术可能最适合的患者档案。未来的工作应包括一项统计支持的研究,调查以下人口统计数据:年龄较大(60岁以上)、日程安排不太繁忙、在使用技术时表现出较高的信心水平,或经历慢性疾病的症状(如疲劳或头痛)。

设备使用说明书 地中海语音应用程序。

参与者的基线问卷。

基于不同患者特征的总体和每周平均参与水平。

显示积极(a)和消极(b)属性问题的数据,以及来自系统可用性量表问卷的结果,第2周的数据在上面,第4周的数据在下面(图S1)。美国国家航空航天局(NASA)-任务负荷指数在第2周和第4周结果中的得分分布(分别为顶部和底部;图S2)。每个nasa任务负荷指数问题的平均分(表S1)。统一理论的接受和使用技术2问卷的每个结构的平均分(表S2)。

缩写 高频

心脏衰竭

美国国家航空航天局

美国国家航空航天局

SUS

系统可用性量表

任务负荷指数

UHN

大学卫生网络

UTAUT2

技术接受与使用的统一理论

VUI

语音用户界面

作者要感谢参与这项研究的患者。他们感谢 地中海护士协调员Mary O 'Sullivan, Sarvatit Bhatt, Eva Pavic, Tina Carriere和Annabelle Fontanilla在招聘过程中提供帮助。他们也要感谢Quynh Pham和Patrick Ware帮助指导这个研究项目的方法,以及Cait Nuun、Madison Taylor和Denise Ng在研究伦理委员会的专业知识和指导。

JAC和HR是创建 地中海该系统将在大学卫生网络的知识产权政策下运行,并可能从这项技术的未来商业化中受益。

非传染性疾病 世界卫生组织 2022 9 16 2022-05-30 https://www.who.int/news-room/fact-sheets/detail/noncommunicable-diseases 迪克森 VV 克拉克 类风湿性关节炎 Rabelo-Silva 巴克 HG 自我护理和慢性疾病 Nurs Res practice 2013 2013 827409 2 10.1155 / 2013/827409 24349772 PMC3852092 濑户 E 伦纳德 K Cafazzo J Masino C 巴恩斯利 J 罗斯 H 多学科心功能门诊心力衰竭患者的自我护理和生活质量 心血管护理杂志 2011 26 5 377 85 10.1097 / JCN.0b013e31820612b8 21263339 制品 P 罗斯 沪江 Cafazzo 晶澳 Laporte 一个 濑户 E 心衰患者基于智能手机的远程监测计划的实施和评估:混合方法研究方案 JMIR Res Protoc 2018 05 03 7 5 e121 10.2196 / resprot.9911 29724704 v7i5e121 PMC5958281 艾尔汗 一个 吉尔 一个 科特 C 汉斯 PK 斯蒂尔灰色 C 初级保健环境中多病患者自我管理的移动健康工具:探索用户体验的试点研究 JMIR Mhealth Uhealth 2018 08 28 6 8 e171 10.2196 / mhealth.8593 30154073 v6i8e171 PMC6134226 马哈茂德 一个 基迪亚 年代 Wyant DK 年代 Bhuyan 党卫军 使用移动健康应用程序促进慢性病患者的健康行为 数字健康 2019 10 10 5 2055207619882181 10.1177 / 2055207619882181 31656632 10.1177 _2055207619882181 PMC6791047 Laranjo l 邓恩 AG) 霍奇金淋巴瘤 Kocaballi AB 程ydF4y2Ba J 巴希尔 R Surian D 加利西亚语 B Magrabi F Coiera E 医疗保健中的对话代理:系统回顾 美国医学信息协会 2018 09 01 25 9 1248 58 10.1093 /地点/ ocy072 30010941 5052181 PMC6118869 格里芬 交流 Z Khairat 年代 Y 贝利 年代 J AE 慢性疾病自我管理的对话代理:系统综述 AMIA年度诉讼程序 2020 2020 504 13 33936424 084年_3410598 PMC8075433 Alnefaie 一个 辛格 年代 Kocaballi B 普拉萨德 会话代理的应用、挑战和未来发展方向 第十七届网络信息系统与技术国际会议论文集 2021 第十七届国际网络信息系统与技术会议(WEBIST) 2021年10月26日至28日 在线 10.5220 / 0010708600003058 布朗斯坦 J Lannon J Lindenauer 年代 37家创业公司为医疗保健开发语音应用程序 MobiHealthNews 2018 8 3. 2022-05-30 https://www.mobihealthnews.com/content/37-startups-building-voice-applications-healthcare Jadczyk T Kiwic O Khandwalla RM 格拉博夫斯基 K Rudawski 年代 Magaczewski P Benyahia H Wojakowski W 亨利 道明 用于医疗数据收集的语音自动化平台的可行性:CardioCube 国际医学杂志 2019 09 129 388 93 10.1016 / j.ijmedinf.2019.07.001 31445282 s1386 - 5056 (19) 30341 - 7 Dojchinovski D Ilievski 一个 卡西 交互式家庭医疗保健系统集成语音助手 第42届信息与通信技术、电子和微电子国际会议论文集 2019 第42届信息与通信技术、电子和微电子国际公约 2019年5月20-24日 奥,克罗地亚 10.23919 / mipro.2019.8756983 Apergi Bjarnadottir MV 巴拉 JS 提单 安德森 公里 J 沙罗双树 N 心力衰竭患者采用语音接口技术的试点比较研究 JMIR Mhealth Uhealth 2021 04 01 9 4 e24646 10.2196/24646 33792556 v9i4e24646 PMC8050751 一个 Raghavaraju V Kanugo J Handrianto Y Y 针对老年2型糖尿病患者的谷歌家庭健康应对语音接口应用程序的开发和评估 第15届IEEE年度消费者通信与网络会议(CCNC)论文集 2018 第15届IEEE年度消费者通信与网络会议(CCNC) 2018年1月12日至15日 美国内华达州拉斯维加斯 10.1109 / ccnc.2018.8319283 Sezgin E Noritz G Elek 一个 Conkol K 生锈 年代 贝利 斯特劳斯 R Chandawarkar 一个 冯Sadovszky V 年代 Y 利用语音交互技术为患有复杂疾病的儿童获取家庭健康和护理信息:多方利益相关者的观点 J医疗互联网服务 2020 02 13 22 2 e14202 10.2196/14202 32053114 v22i2e14202 PMC7055855 沙罗双树 N Bjarnadottir MV 安全顾问 N J Alqutri 海关 阿希 调频 安德森 公里 班尼特 党卫军 库恩 一个 蒙塔沃 B 桑切斯 O Loveland 一个 默罕默德 科幻小说 心衰患者的声控远程监测技术:研究设计、可行性和来自试点随机对照试验的观察 《公共科学图书馆•综合》 2022 5 6 17 5 e0267794 10.1371 / journal.pone.0267794 35522660 玉米饼- d - 21 - 15545 PMC9075666 什么是心血管疾病? 美国中风协会 2022-10-04 https://www.heart.org/en/health-topics/consumer-healthcare/what-is-cardiovascular-disease 白平衡 Belanger AJ 心力衰竭的流行病学 Am Heart J 1991 03 121 3. 951 7 10.1016 / 0002 - 8703 (91) 90225 - 7 什么是心力衰竭? 美国心脏协会 2022-02-17 https://www.heart.org/en/health-topics/heart-failure/what-is-heart-failure F 心脏衰竭 美国心脏协会 2022-10-04 https://www.heart.org/en/health-topics/heart-failure Groenewegen 一个 Rutten 跳频 Mosterd 一个 锄头 亚历山大-伍尔兹 心力衰竭的流行病学 心脏衰竭 2020 08 22 8 1342 56 10.1002 / ejhf.1858 32483830 PMC7540043 制品 P 罗斯 沪江 Cafazzo 晶澳 Boodoo C Munnery 濑户 E 心力衰竭远程监测项目作为门诊心功能诊所护理标准实施的结果:测试前-测试后实用研究 J医疗互联网服务 2020 02 08 22 2 e16538 10.2196/16538 32027309 v22i2e16538 PMC7055875 野蛮的 一个 Munteau C 罗斯 H K Cafazzo J 心脏衰竭管理语音应用体验的设计、开发和可用性评估 JMIR形成决议 2022 10 10.2196/41628 普洛克特 E Silmere H Raghavan R Hovmand P 亚伦 G 他们 一个 Griffey R 汉斯莱 实施研究的结果:概念上的区别、测量的挑战和研究议程 行政政策及健康 2011 03 19 38 2 65 76 10.1007 / s10488 - 010 - 0319 - 7 20957426 PMC3068522 约翰逊 遗传算法 布鲁克斯 全科医生 初始规模开发:试点研究的样本量 教育心理测量 2009 12 18 70 3. 394 400 10.1177 / 0013164409355692 系统可用性量表(SUS) gov 2022-05-30 https://www.usability.gov/how-to-and-tools/methods/system-usability-scale.html 哈特 年代 Staveland l NASA-TLX(任务负荷指数)的发展:经验和理论研究的结果 人类心理负荷 1988 52 139 83 Nordhoff 年代 Louw T Innamaa 年代 Lehtonen E Beuster 一个 Torrao G Bjorvatn 一个 ·凯塞尔 T 马林 F Happee R Merat N 使用UTAUT2模型来解释公众对有条件自动化(L3)汽车的接受程度:对来自八个欧洲国家的9118名汽车司机进行问卷调查研究 交通条例F部交通心理行为 2020 10 74 280 97 10.1016 / j.trf.2020.07.015 CH 组织决策法 2008 08 15 12 4 801 4 10.1177 / 1094428108318066 布拉德肖 C 阿特金森 年代 杜迪 O 在卫生保健研究中采用定性描述方法 Glob qualal Nurs Res 2017 11 24 4 2333393617742282 10.1177 / 2333393617742282 29204457 10.1177 _2333393617742282 PMC5703087 制品 P Dorai 罗斯 沪江 Cafazzo 晶澳 Laporte 一个 Boodoo C 濑户 E 患者对基于手机的心衰远程监测程序的坚持:一项纵向混合方法研究 JMIR Mhealth Uhealth 2019 02 26 7 2 e13259 10.2196/13259 30806625 v7i2e13259 PMC6412156 Demiris G Rantz Skubic 澳元 轮胎 H 基于家庭的老年人辅助技术:态度和认知 AMIA年度诉讼程序 2005 935 16779222 57339 PMC1560682 Demiris G Rantz 乔丹 澳元 Marek KD 轮胎 HW Skubic 胡珊 AA 老年人对“智能家居”技术的态度和看法:试点研究 告知互联网医疗 2004 06 12 29 2 87 94 10.1080 / 14639230410001684387 15370989 W8091GLKV15UPPHK Y Demiris G 汤普森 H 智能音箱使用的可行性支持老化到位 创新老化 2018 560 罗德里格斯 医学博士 Beltran) J Valenzuela-Beltran Cruz-Sandoval D 贫民窟 J 通过基于音频的活动识别系统帮助老年人提醒用药 Pers Ubiquit Comput 2020 06 09 25 2 337 51 10.1007 / s00779 - 020 - 01420 - 4 波拉克 人口老龄化的智能技术:使用人工智能帮助认知障碍的老年人 人工智能杂志 2005 26 2 9 24 莎莉尼· 年代 莱文 T 罗宾逊 E 车道 K 公园 G Skubic 独立生活老年人定制语音助手系统的开发与比较 2019 可汗 施普林格 Berube C Schachner T 凯勒 R Fleisch E V Wangenheim F Barata F Kowatsch T 基于语音的对话代理预防和管理慢性和精神健康状况:系统的文献综述 J医疗互联网服务 2021 03 29 23 3. e25933 10.2196/25933 33658174 v23i3e25933 PMC8042539 Galescu l 艾伦 J 弗格森 G 奎因 J 斯威夫特 用于病人健康监测的对话系统中的语音识别 2009年IEEE生物信息学和生物医学国际会议论文集 2009 2009年IEEE国际生物信息学和生物医学研讨会 2009年11月01-04日 美国华盛顿特区 10.1109 / bibmw.2009.5332111 洛沃 J 费雷拉 l 费雷拉 一个 卡米:心脏衰竭的会话药物助理 国际电子卫生和医疗通讯杂志 2017 美国宾夕法尼亚州 IGI全球 格林 P 社会可取性偏见 威利国际市场营销百科全书 2010 霍博肯,美国新泽西州 威利
Baidu
map