JMIRgydF4y2Ba J医疗互联网服务gydF4y2Ba 医学互联网研究杂志gydF4y2Ba 1438 - 8871gydF4y2Ba 卡塔尔世界杯8强波胆分析 加拿大多伦多gydF4y2Ba v22i6e18301gydF4y2Ba 32442157gydF4y2Ba 10.2196/18301gydF4y2Ba 审查gydF4y2Ba 审查gydF4y2Ba 用于评估医疗保健聊天机器人的技术指标:范围审查gydF4y2Ba 洛维斯gydF4y2Ba 基督教gydF4y2Ba 伊克巴尔gydF4y2Ba 乌斯曼博士gydF4y2Ba BelleigydF4y2Ba EriclesgydF4y2Ba Abd-AlrazaqgydF4y2Ba 阿拉gydF4y2Ba 理学士、理学硕士、博士gydF4y2Ba 1gydF4y2Ba https://orcid.org/0000-0001-7695-4626gydF4y2Ba 萨非gydF4y2Ba ZeinebgydF4y2Ba 二元同步通信,MScgydF4y2Ba 1gydF4y2Ba https://orcid.org/0000-0003-0526-8949gydF4y2Ba AlajlanigydF4y2Ba MohannadgydF4y2Ba 理学士、理学硕士、工商管理硕士、博士gydF4y2Ba 2gydF4y2Ba https://orcid.org/0000-0002-5691-7120gydF4y2Ba 沃伦gydF4y2Ba 吉姆gydF4y2Ba BS博士gydF4y2Ba 3.gydF4y2Ba https://orcid.org/0000-0002-8660-8951gydF4y2Ba HousehgydF4y2Ba MowafagydF4y2Ba 管理学,孟,博士gydF4y2Ba 1gydF4y2Ba https://orcid.org/0000-0002-3648-6271gydF4y2Ba DeneckegydF4y2Ba KerstingydF4y2Ba 纳特博士gydF4y2Ba 4gydF4y2Ba
医学信息学研究所gydF4y2Ba 伯尔尼应用科学大学gydF4y2Ba Quellgasse 21gydF4y2Ba 2502年比尔gydF4y2Ba 伯尔尼gydF4y2Ba 瑞士gydF4y2Ba 41 76 409 97 61gydF4y2Ba kerstin.denecke@bfh.chgydF4y2Ba
https://orcid.org/0000-0001-6691-396XgydF4y2Ba
科学与工程学院gydF4y2Ba 哈马德·本·哈利法大学gydF4y2Ba 多哈回合谈判gydF4y2Ba 卡塔尔gydF4y2Ba 数字医疗保健研究所gydF4y2Ba 华威大学gydF4y2Ba 考文垂gydF4y2Ba 联合王国gydF4y2Ba 计算机科学学院gydF4y2Ba 奥克兰大学gydF4y2Ba 奥克兰gydF4y2Ba 新西兰gydF4y2Ba 医学信息学研究所gydF4y2Ba 伯尔尼应用科学大学gydF4y2Ba 伯尔尼gydF4y2Ba 瑞士gydF4y2Ba 通讯作者:Kerstin DeneckegydF4y2Ba kerstin.denecke@bfh.chgydF4y2Ba 6gydF4y2Ba 2020gydF4y2Ba 5gydF4y2Ba 6gydF4y2Ba 2020gydF4y2Ba 22gydF4y2Ba 6gydF4y2Ba e18301gydF4y2Ba 18gydF4y2Ba 2gydF4y2Ba 2020gydF4y2Ba 8gydF4y2Ba 4gydF4y2Ba 2020gydF4y2Ba 13gydF4y2Ba 4gydF4y2Ba 2020gydF4y2Ba 15gydF4y2Ba 4gydF4y2Ba 2020gydF4y2Ba ©Alaa Abd-Alrazaq, Zeineb Safi, Mohannad Alajlani, Jim Warren, Mowafa Househ, Kerstin Denecke。最初发表于《医疗互联网研究杂志》(//www.mybigtv.com), 05.06.2020。gydF4y2Ba 2020gydF4y2Ba

这是一篇开放获取的文章,根据创作共用署名许可(https://creativecommons.org/licenses/by/4.0/)的条款发布,允许在任何媒介上无限制地使用、分发和复制,前提是正确引用最初发表在《医学互联网研究杂志》上的原创作品。必须包括完整的书目信息,//www.mybigtv.com/上的原始出版物的链接,以及此版权和许可信息。gydF4y2Ba

背景gydF4y2Ba

对话代理(聊天机器人)在医疗保健领域有着悠久的应用历史,它们被用于支持患者自我管理和提供咨询等任务。随着卫生系统需求的增加和人工智能(AI)能力的提高,预计它们的使用将会增长。然而,评估医疗聊天机器人的方法似乎是多样化和随意的,这导致了该领域发展的潜在障碍。gydF4y2Ba

客观的gydF4y2Ba

这项研究旨在确定以前的研究用于评估医疗聊天机器人的技术(非临床)指标。gydF4y2Ba

方法gydF4y2Ba

通过检索7个文献数据库(如MEDLINE和PsycINFO),并对纳入的研究和相关综述进行反向和正向参考文献列表检查,确定研究。这些研究由两名审稿人独立选择,然后从纳入的研究中提取数据。提取的数据通过将识别的指标分组到基于指标评估的聊天机器人方面的类别来叙述地合成。gydF4y2Ba

结果gydF4y2Ba

在检索到的1498篇文献中,有65篇文献被收录在本综述中。使用27个技术指标评估聊天机器人,这些指标与聊天机器人整体(如可用性、分类器性能、速度)、响应生成(如可理解性、真实性、重复性)、响应理解(如用户评估的聊天机器人理解、单词错误率、概念错误率)和美学(如虚拟代理的外观、背景颜色和内容)有关。gydF4y2Ba

结论gydF4y2Ba

健康聊天机器人研究的技术指标是多种多样的,主要是调查设计和全球可用性指标。由于缺乏标准化和客观措施,很难比较健康聊天机器人的性能,并可能阻碍该领域的发展。我们建议研究人员更频繁地包括从对话日志中计算的指标。此外,我们建议开发一个技术指标框架,并针对具体情况提出建议,将其纳入聊天机器人研究中。gydF4y2Ba

聊天机器人gydF4y2Ba 会话代理gydF4y2Ba 卫生保健gydF4y2Ba 评价gydF4y2Ba 指标gydF4y2Ba
简介gydF4y2Ba 背景gydF4y2Ba

几十年前,人们就意识到人机对话在提供医疗保健方面的潜力。1966年,Weizenbaum的ELIZA系统通过当时可能的相对简单的语言标记操作来模仿心理治疗师,引起了公众的想象[gydF4y2Ba 1gydF4y2Ba].从20世纪90年代中期开始,一系列基于自动电话会话(电话连接护理)的干预措施证明了在促进包括药物、饮食和体育活动在内的一系列行为的健康依从性方面的有效性[gydF4y2Ba 2gydF4y2Ba].随着移动电话的普及,一系列基于短信的干预措施已经被开发和试验,在戒烟方面尤其成功[gydF4y2Ba 3.gydF4y2Ba].与此同时,互联网/基于网络的干预已显示出促进积极健康行为改变的能力[gydF4y2Ba 4gydF4y2Ba,gydF4y2Ba 5gydF4y2Ba],而与用户坚持使用互联网干预相关的交互组件已日益为人所熟知,其中包括对话元素[gydF4y2Ba 6gydF4y2Ba].gydF4y2Ba

随着智能手机的出现,高度互动性的聊天机器人的传播得到了极大的促进,特别是随着应用商店的普遍使用和聊天机器人聊天应用的广泛安装,尤其是Facebook Messenger。聊天机器人与其他电子健康干预措施一样,提供可扩展性和24小时可用性,以填补未满足的健康需求的缺口。例如,Woebot提供认知行为疗法,并在患有抑郁症的学生中进行了测试[gydF4y2Ba 7gydF4y2Ba].根据抑郁问卷PHQ-9的测量,在研究期间,使用Woebot的学生明显减轻了抑郁症状,而信息对照组的学生(他们阅读自助书籍)并没有减轻抑郁症状。gydF4y2Ba 7gydF4y2Ba].近年来,基于深度学习的人工智能(AI)在某些诊断任务上的表现超过了医生,引发了轩然大波[gydF4y2Ba 8gydF4y2Ba,gydF4y2Ba 9gydF4y2Ba].小冰是一款强调情感连接的社交聊天机器人,自2014年推出以来,它已经与超过6.6亿活跃用户进行了交流。gydF4y2Ba 10gydF4y2Ba];它的表现表明,深度学习可以成功地应用于有意义的对话任务。结合易于分发、成功应用和提高健康聊天机器人性能的人工智能方法等因素,我们有理由期待数量和种类越来越多的健康聊天机器人在医疗保健系统中发挥越来越重要的作用。gydF4y2Ba

研究问题与目的gydF4y2Ba

要成为一门以证据为基础的学科,就需要对绩效进行衡量。健康聊天机器人对临床结果的影响是衡量成功的最终标准。例如,在接受的测量(如PHQ-9)中,病情(如抑郁症,糖尿病)是否改善到统计显著程度[gydF4y2Ba 11gydF4y2Ba]或糖化血红蛋白[gydF4y2Ba 12gydF4y2Ba],分别),与对照组相比?然而,这样的研究可能需要大样本量来检测效果,并且对聊天机器人实现变化的机制提供的洞察相对较少;此外,如果结果是消极的,研究提供的见解可能特别少。gydF4y2Ba

作为临床结果指标的替代和有用的先驱,技术指标关注聊天机器人本身的性能(例如,参与者是否觉得它是可用的,给出适当的回应,并理解他们的输入?)适当性指所提供的资料与解决所提示的问题有关[gydF4y2Ba 13gydF4y2Ba].此外,这包括对聊天机器人交互的更客观的测量,例如会话中会话的次数或时间,以及需要一些解释但仍然定义明确的测量,例如任务完成情况。这些技术措施提供了一种潜在的方法来比较健康聊天机器人,并了解聊天机器人的使用和性能,以确定它是否工作得足够好,足以保证试验的时间和费用来衡量临床结果。gydF4y2Ba

在此之前,我们引入了一个健康聊天机器人评估措施框架,为开发人员提供指导[gydF4y2Ba 14gydF4y2Ba].然而,框架的制定是基于一个相对非正式的过程,作者在制定框架时考虑哪些研究方面容易产生偏见。因此,本研究的目的是使用严格的审查方法来确定以前的研究用于评估医疗聊天机器人的技术指标。这些努力的最终目标是能够为健康聊天机器人的评估框架提出建议。gydF4y2Ba

方法gydF4y2Ba 概述gydF4y2Ba

为达到上述目标,我们进行了范围检讨。为开展透明且可复制的评审,我们遵循了PRISMA(系统评审和元分析首选报告项目)范围评审扩展指南[gydF4y2Ba 15gydF4y2Ba].这项研究是由具有护理、计算机科学和心理健康应用背景的研究人员组成的跨学科团队进行的。gydF4y2Ba

搜索策略gydF4y2Ba 搜索源gydF4y2Ba

在这篇综述中,我们搜索了2019年11月1日至3日的文献数据库:MEDLINE(通过EBSCO), EMBASE(摘录pta Medica数据库;通过奥维德),PsycINFO(通过奥维德),CINAHL(护理和相关健康文献的累积索引;通过EBSCO), IEEE(电气和电子工程师协会)Xplore, ACM(计算机械协会)数字图书馆,和谷歌学者。我们只筛选了通过搜索谷歌Scholar检索到的前100个结果,因为它通常检索几千个参考文献,按它们与搜索主题的相关性排序。我们检查了纳入研究的参考文献列表,以确定与当前综述相关的进一步研究(即反向参考文献列表检查)。此外,我们使用谷歌Scholar中提供的“引用对象”功能来查找和筛选引用了纳入研究的研究(即向前参考文献列表检查)。gydF4y2Ba

搜索条件gydF4y2Ba

搜索词来源于先前发表的文献和信息学专家的意见。对于与健康相关的数据库,我们使用与感兴趣的干预相关的搜索词(例如,聊天机器人、会话代理和聊天机器人)。除了与干预相关的术语外,我们还使用了与上下文相关的术语(例如,健康、疾病和医疗)用于非健康相关的数据库(例如,IEEE和ACM数字图书馆)。gydF4y2Ba 多媒体附件1gydF4y2Ba详细说明用于搜索每个电子数据库的搜索字符串。gydF4y2Ba

研究资格准则gydF4y2Ba

在这篇综述中,感兴趣的干预是旨在为患者提供医疗保健服务的聊天机器人。其中包括在独立软件或基于web的平台上实现的聊天机器人。然而,我们排除了由人类操作的聊天机器人(Wizard-of-Oz)或集成到机器人、严肃游戏、短信短信或电话系统中的聊天机器人。为了入选,研究必须报告对聊天机器人的技术评估(如可用性、分类器性能和单词错误率)。我们包括了同行评议的文章、论文和会议记录,但排除了评论、提案、社论和会议摘要。这篇综述只包括了用英语撰写的研究。研究设计、研究背景、发表年份和发表国家均不受限制。gydF4y2Ba

研究选择gydF4y2Ba

作者MA和ZS独立筛选所有检索文献的标题和摘要,然后独立阅读纳入研究的全文。两位审查员之间的任何分歧都由AA解决。我们通过计算Cohen来评估编码器之间的一致性,筛选标题和摘要的Cohen为0.82,阅读全文的Cohen为0.91,表明非常好的一致性[gydF4y2Ba 16gydF4y2Ba].gydF4y2Ba

数据提取gydF4y2Ba

为了从纳入的研究中进行可靠和准确的数据提取,开发了数据提取表单,并使用8项纳入的研究进行了试点(gydF4y2Ba 多媒体附件2gydF4y2Ba).数据提取过程由两名审稿人(MA和ZS)独立进行,第三名审稿人(AA)解决任何分歧。审稿人之间的编码一致性良好(Cohen κ=0.67)。gydF4y2Ba

数据合成gydF4y2Ba

采用叙述的方法来综合提取的数据。在确定了所包含的研究用于评估聊天机器人的所有技术指标后,我们根据指标评估的聊天机器人方面将它们分为4类。这四个类别是经过作者讨论并达成共识后形成的。对于每一个指标,我们都确定了研究是如何测量的。数据合成使用Microsoft Excel(微软公司)进行管理。gydF4y2Ba

结果gydF4y2Ba 搜索结果gydF4y2Ba

通过检索7个电子数据库,检索到1498篇引文。去除199篇(13.3%)重复引文后,筛选出1299篇(86.7%)标题和摘要。筛选过程导致排除了1113篇(74.3%)的标题和摘要,原因如下gydF4y2Ba 图1gydF4y2Ba.当我们阅读其余186篇(12.4%)引文的全文时,另外133篇(8.9%)引文被排除在外(gydF4y2Ba 图1gydF4y2Ba).通过前后参照检查,总共发现了12项研究。我们在综述中纳入了65项研究。gydF4y2Ba

研究选择过程流程图。gydF4y2Ba

纳入研究的描述gydF4y2Ba

所包含的研究的特征在gydF4y2Ba 表1gydF4y2Ba.横断面调查是最常用的研究设计(n= 41,63%)。纳入的研究中约57% (n=37)作为期刊文章发表。一半的研究(n= 33,51%)在美国进行。大约70% (n=45)的研究发表于2015年至2019年之间。gydF4y2Ba

61项研究报告了样本量,38项研究(62%)的参与者为50人或更少。在44项研究中,报告了参与者的年龄;参与者的平均年龄为39岁,范围在13-79岁之间。54项研究报告了参与者的性别,其中男性的平均比例为48.1%。在报告参与者健康状况的62项研究中,34项(54.8%)研究从临床人群(即有健康问题的人群)中招募了参与者。参与者分别来自临床环境(n=30, 49.2%)、社区环境(n=20, 32.8%)和教育环境(n=18, 29.5%)。每个纳入研究的元数据和人口特征都在gydF4y2Ba 多媒体gydF4y2Ba.gydF4y2Ba

聊天机器人被用于自我管理(n= 17,26.2%)、治疗目的(n= 12,18.5%)、咨询(n= 12,18.5%)、教育(n= 10,15.4%)、筛查(n= 9,13.8%)、培训(n= 7,10.8%)和诊断(n= 3,4.6%)。虽然聊天机器人在约62% (n=40)的研究中是在独立软件中实现的,但在其余的研究中(n= 25,39%)聊天机器人是在基于web的平台上实现的。在纳入的研究中,分别有82% (N=53)、17% (N= 11)和2% (N= 1)的聊天机器人响应是基于预定义规则、机器学习方法或两种方法(混合)生成的。在大多数研究中(n= 5889%),聊天机器人主导了对话。在大约62% (n=40)的研究中,用户仅通过输入他们的话语(文本)与聊天机器人互动。聊天机器人与用户互动最常用的方式是文本、语音和非语言的组合(即面部表情和肢体语言;(N = 21,32%),只有文本(N = 20,31%),以及语音和非语言的结合(N = 19,29%)。聊天机器人最常见的疾病是任何健康问题(n= 20,31%)和抑郁症(n= 15,23%)。gydF4y2Ba 多媒体附件4gydF4y2Ba显示每个纳入研究的干预特征。gydF4y2Ba

纳入研究的特征(N=65)。gydF4y2Ba

参数及特点gydF4y2Ba 研究,n (%)gydF4y2Ba一个gydF4y2Ba
研究元数据gydF4y2Ba
研究设计gydF4y2Ba
调查gydF4y2Ba 41 (63)gydF4y2Ba
准试验gydF4y2Ba 11 (17)gydF4y2Ba
随机对照试验gydF4y2Ba 13 (20)gydF4y2Ba
刊物类型gydF4y2Ba
期刊文章gydF4y2Ba 37 (57)gydF4y2Ba
会议进行gydF4y2Ba 25 (39)gydF4y2Ba
论文gydF4y2Ba 3 (5)gydF4y2Ba
国家gydF4y2Ba
美国gydF4y2Ba 33 (51)gydF4y2Ba
法国gydF4y2Ba 5 (8)gydF4y2Ba
荷兰gydF4y2Ba 3 (5)gydF4y2Ba
日本gydF4y2Ba 3 (5)gydF4y2Ba
澳大利亚gydF4y2Ba 3 (5)gydF4y2Ba
意大利gydF4y2Ba 2 (3)gydF4y2Ba
瑞士和荷兰gydF4y2Ba 2 (3)gydF4y2Ba
芬兰gydF4y2Ba 1 (2)gydF4y2Ba
瑞典gydF4y2Ba 1 (2)gydF4y2Ba
火鸡gydF4y2Ba 1 (2)gydF4y2Ba
联合王国gydF4y2Ba 1 (2)gydF4y2Ba
瑞士和德国gydF4y2Ba 1 (2)gydF4y2Ba
墨西哥gydF4y2Ba 1 (2)gydF4y2Ba
西班牙gydF4y2Ba 1 (2)gydF4y2Ba
全球人口gydF4y2Ba 1 (2)gydF4y2Ba
罗马尼亚、西班牙和苏格兰gydF4y2Ba 1 (2)gydF4y2Ba
菲律宾gydF4y2Ba 1 (2)gydF4y2Ba
瑞士gydF4y2Ba 1 (2)gydF4y2Ba
新西兰gydF4y2Ba 1 (2)gydF4y2Ba
西班牙和新西兰gydF4y2Ba 1 (2)gydF4y2Ba
南非gydF4y2Ba 1 (2)gydF4y2Ba
出版年份gydF4y2Ba
在2010年之前gydF4y2Ba 3 (5)gydF4y2Ba
2010 - 2014gydF4y2Ba 17 (26)gydF4y2Ba
2015 - 2019gydF4y2Ba 45 (70)gydF4y2Ba
人口gydF4y2Ba 特征gydF4y2Ba
样本大小gydF4y2BabgydF4y2Ba
≤50gydF4y2Ba 38 (62)gydF4y2Ba
51 - 100gydF4y2Ba 11 (18)gydF4y2Ba
101 - 200gydF4y2Ba 9 (15)gydF4y2Ba
> 200gydF4y2Ba 3 (5)gydF4y2Ba
年龄(年)gydF4y2BacgydF4y2Ba
意思是(范围)gydF4y2Ba 39 (13 - 79)gydF4y2Ba
性(%)gydF4y2BaegydF4y2Ba
男性gydF4y2Ba 48.1gydF4y2Ba
健康状况gydF4y2BafgydF4y2Ba
临床样本gydF4y2Ba 34 (55)gydF4y2Ba
临床前的样本gydF4y2Ba 28 (45)gydF4y2Ba
设置gydF4y2Bag hgydF4y2Ba
临床gydF4y2Ba 30 (50)gydF4y2Ba
社区gydF4y2Ba 20 (33)gydF4y2Ba
教育gydF4y2Ba 18 (30)gydF4y2Ba
干预的特点gydF4y2Ba
目的gydF4y2Ba我gydF4y2Ba
自我管理gydF4y2Ba 17 (26)gydF4y2Ba
治疗gydF4y2Ba 12 (19)gydF4y2Ba
咨询gydF4y2Ba 12 (19)gydF4y2Ba
教育gydF4y2Ba 10 (15)gydF4y2Ba
筛选gydF4y2Ba 9 (14)gydF4y2Ba
培训gydF4y2Ba 7 (11)gydF4y2Ba
诊断gydF4y2Ba 3 (5)gydF4y2Ba
平台gydF4y2Ba
独立的软件gydF4y2Ba 40 (62)gydF4y2Ba
基于网络的gydF4y2Ba 25 (39)gydF4y2Ba
反应生成gydF4y2Ba
基于规则的gydF4y2Ba 53 (82)gydF4y2Ba
人工智能gydF4y2Ba 11 (17)gydF4y2Ba
混合动力gydF4y2Ba 1 (2)gydF4y2Ba
对话活动gydF4y2Ba
聊天机器人gydF4y2Ba 58 (89)gydF4y2Ba
用户gydF4y2Ba 4 (6)gydF4y2Ba
这两个gydF4y2Ba 3 (5)gydF4y2Ba
输入模式gydF4y2Ba
文本gydF4y2Ba 40 (62)gydF4y2Ba
的声音gydF4y2Ba 9 (14)gydF4y2Ba
声音和非语言gydF4y2Ba 8 (12)gydF4y2Ba
文字和语音gydF4y2Ba 6 (9)gydF4y2Ba
文本和非语言gydF4y2Ba 2 (3)gydF4y2Ba
输出模式gydF4y2Ba
文字,声音和非语言gydF4y2Ba 21 (32)gydF4y2Ba
文本gydF4y2Ba 20 (31)gydF4y2Ba
声音和非语言gydF4y2Ba 19 (29)gydF4y2Ba
文字和语音gydF4y2Ba 4 (6)gydF4y2Ba
的声音gydF4y2Ba 1 (2)gydF4y2Ba
有针对性的障碍gydF4y2BajgydF4y2Ba
任何健康状况gydF4y2Ba 20 (31)gydF4y2Ba
抑郁症gydF4y2Ba 15 (23)gydF4y2Ba
自闭症gydF4y2Ba 5 (8)gydF4y2Ba
焦虑gydF4y2Ba 5 (8)gydF4y2Ba
物质使用障碍gydF4y2Ba 5 (8)gydF4y2Ba
创伤后应激障碍gydF4y2Ba 5 (8)gydF4y2Ba
精神障碍gydF4y2Ba 3 (5)gydF4y2Ba
性传播疾病gydF4y2Ba 3 (5)gydF4y2Ba
睡眠障碍gydF4y2Ba 2 (3)gydF4y2Ba
糖尿病gydF4y2Ba 2 (3)gydF4y2Ba
阿尔茨海默gydF4y2Ba 1 (2)gydF4y2Ba
哮喘gydF4y2Ba 1 (2)gydF4y2Ba
子宫颈癌gydF4y2Ba 1 (2)gydF4y2Ba
痴呆gydF4y2Ba 1 (2)gydF4y2Ba
精神分裂症gydF4y2Ba 1 (2)gydF4y2Ba
压力gydF4y2Ba 1 (2)gydF4y2Ba
的遗传变异gydF4y2Ba 1 (2)gydF4y2Ba
认知障碍gydF4y2Ba 1 (2)gydF4y2Ba
心房纤颤gydF4y2Ba 1 (2)gydF4y2Ba

一个gydF4y2Ba百分比是四舍五入的,总和可能不等于100。gydF4y2Ba

bgydF4y2Ba61项研究报告了样本量。gydF4y2Ba

cgydF4y2Ba44项研究报告了平均年龄。gydF4y2Ba

dgydF4y2BaN/A:不适用。gydF4y2Ba

egydF4y2Ba54项研究报告了性。gydF4y2Ba

fgydF4y2Ba62项研究报告了样本类型。gydF4y2Ba

ggydF4y2Ba61项研究报告了环境。gydF4y2Ba

hgydF4y2Ba由于几个聊天机器人关注的健康状况不止一种,所以数据加起来并不合理。gydF4y2Ba

我gydF4y2Ba数字不能相加,因为几个聊天机器人有不止一个目的。gydF4y2Ba

jgydF4y2Ba由于几个聊天机器人针对的健康状况不止一种,所以这些数字加起来并不合理。gydF4y2Ba

研究结果gydF4y2Ba 概述gydF4y2Ba

所收录的研究使用许多技术指标评估聊天机器人,这些指标被分为4个主要组:与聊天机器人相关的指标(全局指标),与响应生成相关的指标,与响应理解相关的指标,与美学相关的指标。关于度量的更多细节将在以下部分中介绍。gydF4y2Ba

全球标准gydF4y2Ba

这些研究使用以下指标对聊天机器人进行整体评估:可用性、分类器性能、速度、技术问题、智能、任务完成率、对话效率、对话处理、上下文感知和错误管理。gydF4y2Ba

37项(56.9%)研究评估了聊天机器人的可用性[gydF4y2Ba 17gydF4y2Ba-gydF4y2Ba 53gydF4y2Ba].可用性是通过自我管理问卷中的一个问题来评估的[gydF4y2Ba 17gydF4y2Ba,gydF4y2Ba 20.gydF4y2Ba-gydF4y2Ba 25gydF4y2Ba,gydF4y2Ba 29gydF4y2Ba-gydF4y2Ba 31gydF4y2Ba,gydF4y2Ba 33gydF4y2Ba,gydF4y2Ba 34gydF4y2Ba,gydF4y2Ba 36gydF4y2Ba,gydF4y2Ba 37gydF4y2Ba,gydF4y2Ba 40gydF4y2Ba,gydF4y2Ba 42gydF4y2Ba,gydF4y2Ba 44gydF4y2Ba,gydF4y2Ba 45gydF4y2Ba,gydF4y2Ba 47gydF4y2Ba-gydF4y2Ba 51gydF4y2Ba,gydF4y2Ba 53gydF4y2Ba],自填问卷中的多个问题[gydF4y2Ba 28gydF4y2Ba,gydF4y2Ba 41gydF4y2Ba,gydF4y2Ba 43gydF4y2Ba],一份特定的问卷(如系统可用性量表问卷)[gydF4y2Ba 18gydF4y2Ba,gydF4y2Ba 26gydF4y2Ba,gydF4y2Ba 27gydF4y2Ba,gydF4y2Ba 32gydF4y2Ba,gydF4y2Ba 35gydF4y2Ba,gydF4y2Ba 38gydF4y2Ba,gydF4y2Ba 39gydF4y2Ba,gydF4y2Ba 46gydF4y2Ba,gydF4y2Ba 52gydF4y2Ba],或观察[gydF4y2Ba 19gydF4y2Ba].gydF4y2Ba

8项(12.3%)研究评估了聊天机器人的分类器性能[gydF4y2Ba 54gydF4y2Ba-gydF4y2Ba 61gydF4y2Ba].许多指标被用来衡量分类器的性能,即:曲线下面积[gydF4y2Ba 54gydF4y2Ba,gydF4y2Ba 55gydF4y2Ba,gydF4y2Ba 60gydF4y2Ba,gydF4y2Ba 61gydF4y2Ba],准确度[gydF4y2Ba 56gydF4y2Ba-gydF4y2Ba 58gydF4y2Ba,gydF4y2Ba 61gydF4y2Ba],敏感性[gydF4y2Ba 55gydF4y2Ba,gydF4y2Ba 57gydF4y2Ba,gydF4y2Ba 59gydF4y2Ba,gydF4y2Ba 60gydF4y2Ba],特异性[gydF4y2Ba 55gydF4y2Ba,gydF4y2Ba 57gydF4y2Ba,gydF4y2Ba 59gydF4y2Ba,gydF4y2Ba 60gydF4y2Ba],正预测值[gydF4y2Ba 55gydF4y2Ba,gydF4y2Ba 57gydF4y2Ba,gydF4y2Ba 60gydF4y2Ba],负预测值[gydF4y2Ba 55gydF4y2Ba,gydF4y2Ba 60gydF4y2Ba].聊天机器人的速度在4项研究中进行了检验[gydF4y2Ba 29gydF4y2Ba,gydF4y2Ba 35gydF4y2Ba,gydF4y2Ba 53gydF4y2Ba,gydF4y2Ba 62gydF4y2Ba].速度是通过自我管理问卷中的一个问题来评估的[gydF4y2Ba 29gydF4y2Ba,gydF4y2Ba 35gydF4y2Ba],自填问卷中的多个问题[gydF4y2Ba 53gydF4y2Ba],以及面试[gydF4y2Ba 62gydF4y2Ba].gydF4y2Ba

4项研究(6.2%)探讨了聊天机器人的技术问题(如错误/故障)[gydF4y2Ba 7gydF4y2Ba,gydF4y2Ba 36gydF4y2Ba,gydF4y2Ba 51gydF4y2Ba,gydF4y2Ba 63gydF4y2Ba].通过访谈评估技术问题[gydF4y2Ba 7gydF4y2Ba,gydF4y2Ba 51gydF4y2Ba,gydF4y2Ba 63gydF4y2Ba],自填问卷中的一个问题[gydF4y2Ba 36gydF4y2Ba],以及查阅员工档案[gydF4y2Ba 51gydF4y2Ba].此外,还有3项研究在一份自我填写的问卷中使用多个问题来评估聊天机器人的智力[gydF4y2Ba 41gydF4y2Ba,gydF4y2Ba 64gydF4y2Ba]或自填问卷中的一个问题[gydF4y2Ba 27gydF4y2Ba].在3项研究中,任务完成率是通过检查对话日志来检验的[gydF4y2Ba 38gydF4y2Ba,gydF4y2Ba 53gydF4y2Ba,gydF4y2Ba 65gydF4y2Ba].gydF4y2Ba

在这些被回顾的研究中,有2项(3.1%)研究通过访谈考察了聊天机器人在对话处理方面的灵活性(例如,它维持对话并处理用户的一般性问题或回答的能力,这些问题或回答需要的信息比要求的更多、更少或不同)[gydF4y2Ba 27gydF4y2Ba]及自填问卷中的多个问题[gydF4y2Ba 38gydF4y2Ba].聊天机器人的对话效率是指完成一项任务所需的对话步骤的数量,在一项研究中通过审查转录的对话日志来评估[gydF4y2Ba 38gydF4y2Ba].同一项研究在一份自我管理的问卷中测试了聊天机器人的上下文意识(即它利用上下文知识来适当地回应用户的能力)[gydF4y2Ba 38gydF4y2Ba].错误管理,指的是聊天机器人检测和理解用户回复中拼写错误的单词的能力(例如,“anious”而不是“anxious”),仅在一项研究中进行了检验[gydF4y2Ba 27gydF4y2Ba].gydF4y2Ba

与响应生成相关的度量gydF4y2Ba

所包括的研究使用以下指标来评估聊天机器人的响应生成:响应的适当性、可理解性、真实性、响应速度、同理心、重复性、语音清晰性和语言准确性。gydF4y2Ba

在经检讨的研究中,15项(23.1%)研究口头[gydF4y2Ba 18gydF4y2Ba,gydF4y2Ba 19gydF4y2Ba,gydF4y2Ba 27gydF4y2Ba,gydF4y2Ba 28gydF4y2Ba,gydF4y2Ba 31gydF4y2Ba,gydF4y2Ba 34gydF4y2Ba,gydF4y2Ba 38gydF4y2Ba,gydF4y2Ba 39gydF4y2Ba,gydF4y2Ba 51gydF4y2Ba,gydF4y2Ba 58gydF4y2Ba,gydF4y2Ba 66gydF4y2Ba-gydF4y2Ba 69gydF4y2Ba]和聊天机器人的非语言回应[gydF4y2Ba 32gydF4y2Ba].采用访谈方式评估回应的适当性[gydF4y2Ba 18gydF4y2Ba,gydF4y2Ba 19gydF4y2Ba,gydF4y2Ba 31gydF4y2Ba,gydF4y2Ba 34gydF4y2Ba,gydF4y2Ba 51gydF4y2Ba,gydF4y2Ba 66gydF4y2Ba,gydF4y2Ba 68gydF4y2Ba],自填式问卷单题[gydF4y2Ba 27gydF4y2Ba,gydF4y2Ba 32gydF4y2Ba,gydF4y2Ba 39gydF4y2Ba,gydF4y2Ba 67gydF4y2Ba]、对话记录[gydF4y2Ba 38gydF4y2Ba,gydF4y2Ba 58gydF4y2Ba,gydF4y2Ba 69gydF4y2Ba],以及自填问卷中的多个问题[gydF4y2Ba 28gydF4y2Ba].gydF4y2Ba

14项(21.5%)研究评估了响应的可理解性,即聊天机器人生成用户可理解的响应的程度[gydF4y2Ba 20.gydF4y2Ba,gydF4y2Ba 23gydF4y2Ba,gydF4y2Ba 31gydF4y2Ba,gydF4y2Ba 34gydF4y2Ba,gydF4y2Ba 36gydF4y2Ba,gydF4y2Ba 39gydF4y2Ba,gydF4y2Ba 42gydF4y2Ba,gydF4y2Ba 44gydF4y2Ba,gydF4y2Ba 51gydF4y2Ba,gydF4y2Ba 52gydF4y2Ba,gydF4y2Ba 59gydF4y2Ba,gydF4y2Ba 60gydF4y2Ba,gydF4y2Ba 63gydF4y2Ba,gydF4y2Ba 69gydF4y2Ba].使用自填问卷中的一个问题来评估回答的可理解性[gydF4y2Ba 20.gydF4y2Ba,gydF4y2Ba 23gydF4y2Ba,gydF4y2Ba 31gydF4y2Ba,gydF4y2Ba 36gydF4y2Ba,gydF4y2Ba 39gydF4y2Ba,gydF4y2Ba 42gydF4y2Ba,gydF4y2Ba 44gydF4y2Ba,gydF4y2Ba 52gydF4y2Ba,gydF4y2Ba 59gydF4y2Ba,gydF4y2Ba 60gydF4y2Ba,gydF4y2Ba 63gydF4y2Ba,gydF4y2Ba 69gydF4y2Ba]及面试[gydF4y2Ba 34gydF4y2Ba,gydF4y2Ba 51gydF4y2Ba].gydF4y2Ba

总共有14项(21.5%)研究评估了类人聊天机器人(真实感)[gydF4y2Ba 17gydF4y2Ba,gydF4y2Ba 18gydF4y2Ba,gydF4y2Ba 21gydF4y2Ba,gydF4y2Ba 34gydF4y2Ba,gydF4y2Ba 39gydF4y2Ba,gydF4y2Ba 41gydF4y2Ba,gydF4y2Ba 46gydF4y2Ba,gydF4y2Ba 50gydF4y2Ba,gydF4y2Ba 63gydF4y2Ba,gydF4y2Ba 66gydF4y2Ba,gydF4y2Ba 68gydF4y2Ba,gydF4y2Ba 70gydF4y2Ba-gydF4y2Ba 72gydF4y2Ba].聊天机器人的真实性仅从语言反应的角度进行了检验[gydF4y2Ba 17gydF4y2Ba,gydF4y2Ba 21gydF4y2Ba,gydF4y2Ba 34gydF4y2Ba,gydF4y2Ba 39gydF4y2Ba,gydF4y2Ba 46gydF4y2Ba,gydF4y2Ba 63gydF4y2Ba,gydF4y2Ba 68gydF4y2Ba,gydF4y2Ba 70gydF4y2Ba]、非语言回应[gydF4y2Ba 66gydF4y2Ba],或言语及非言语回应[gydF4y2Ba 18gydF4y2Ba,gydF4y2Ba 41gydF4y2Ba,gydF4y2Ba 50gydF4y2Ba,gydF4y2Ba 71gydF4y2Ba,gydF4y2Ba 72gydF4y2Ba].纳入的研究使用自我管理问卷中的一个问题来评估现实主义[gydF4y2Ba 17gydF4y2Ba,gydF4y2Ba 18gydF4y2Ba,gydF4y2Ba 21gydF4y2Ba,gydF4y2Ba 39gydF4y2Ba,gydF4y2Ba 46gydF4y2Ba,gydF4y2Ba 50gydF4y2Ba,gydF4y2Ba 63gydF4y2Ba,gydF4y2Ba 70gydF4y2Ba],自填问卷中的多个问题[gydF4y2Ba 41gydF4y2Ba,gydF4y2Ba 72gydF4y2Ba],以及面试[gydF4y2Ba 18gydF4y2Ba,gydF4y2Ba 34gydF4y2Ba,gydF4y2Ba 66gydF4y2Ba,gydF4y2Ba 68gydF4y2Ba,gydF4y2Ba 71gydF4y2Ba].gydF4y2Ba

总共有11项(16.9%)研究评估了聊天机器人的响应速度[gydF4y2Ba 18gydF4y2Ba,gydF4y2Ba 19gydF4y2Ba,gydF4y2Ba 28gydF4y2Ba,gydF4y2Ba 30.gydF4y2Ba,gydF4y2Ba 34gydF4y2Ba,gydF4y2Ba 36gydF4y2Ba,gydF4y2Ba 38gydF4y2Ba,gydF4y2Ba 68gydF4y2Ba-gydF4y2Ba 70gydF4y2Ba,gydF4y2Ba 73gydF4y2Ba].在一份自我填写的问卷中,用一个问题来检验回答的速度[gydF4y2Ba 18gydF4y2Ba,gydF4y2Ba 30.gydF4y2Ba,gydF4y2Ba 36gydF4y2Ba,gydF4y2Ba 69gydF4y2Ba,gydF4y2Ba 70gydF4y2Ba,gydF4y2Ba 73gydF4y2Ba]、面试[gydF4y2Ba 19gydF4y2Ba,gydF4y2Ba 34gydF4y2Ba,gydF4y2Ba 68gydF4y2Ba],自填问卷中的多个问题[gydF4y2Ba 53gydF4y2Ba],以及系统日志[gydF4y2Ba 38gydF4y2Ba].聊天机器人的同理心,指的是它向用户展示同理心的能力,在10项研究中进行了检验[gydF4y2Ba 7gydF4y2Ba,gydF4y2Ba 35gydF4y2Ba,gydF4y2Ba 41gydF4y2Ba,gydF4y2Ba 42gydF4y2Ba,gydF4y2Ba 64gydF4y2Ba,gydF4y2Ba 66gydF4y2Ba,gydF4y2Ba 67gydF4y2Ba,gydF4y2Ba 71gydF4y2Ba,gydF4y2Ba 73gydF4y2Ba,gydF4y2Ba 74gydF4y2Ba].这些研究使用自我填写的问卷中的一个问题来评估同理心[gydF4y2Ba 7gydF4y2Ba,gydF4y2Ba 35gydF4y2Ba,gydF4y2Ba 41gydF4y2Ba,gydF4y2Ba 42gydF4y2Ba,gydF4y2Ba 67gydF4y2Ba,gydF4y2Ba 71gydF4y2Ba,gydF4y2Ba 73gydF4y2Ba]、面试[gydF4y2Ba 66gydF4y2Ba,gydF4y2Ba 71gydF4y2Ba],以及自填问卷中的多个问题[gydF4y2Ba 64gydF4y2Ba].gydF4y2Ba

9项(13.8%)研究检验了聊天机器人回答的重复性[gydF4y2Ba 7gydF4y2Ba,gydF4y2Ba 20.gydF4y2Ba,gydF4y2Ba 27gydF4y2Ba,gydF4y2Ba 53gydF4y2Ba,gydF4y2Ba 57gydF4y2Ba,gydF4y2Ba 66gydF4y2Ba,gydF4y2Ba 73gydF4y2Ba,gydF4y2Ba 75gydF4y2Ba,gydF4y2Ba 76gydF4y2Ba].使用自填问卷中的一个问题来评估回答的重复性[gydF4y2Ba 7gydF4y2Ba,gydF4y2Ba 20.gydF4y2Ba,gydF4y2Ba 27gydF4y2Ba,gydF4y2Ba 53gydF4y2Ba,gydF4y2Ba 57gydF4y2Ba,gydF4y2Ba 73gydF4y2Ba]及面试[gydF4y2Ba 66gydF4y2Ba,gydF4y2Ba 75gydF4y2Ba,gydF4y2Ba 76gydF4y2Ba].我们发现有6项(9.2%)研究通过访谈来评估演讲的清晰度或质量[gydF4y2Ba 51gydF4y2Ba,gydF4y2Ba 62gydF4y2Ba,gydF4y2Ba 75gydF4y2Ba]或自填问卷中的一个问题[gydF4y2Ba 27gydF4y2Ba,gydF4y2Ba 69gydF4y2Ba,gydF4y2Ba 77gydF4y2Ba].在2项(3.7%)研究中评估了聊天机器人回答的语言准确性,使用了自我管理问卷中的一个问题[gydF4y2Ba 31gydF4y2Ba,gydF4y2Ba 35gydF4y2Ba].gydF4y2Ba

与响应理解相关的度量gydF4y2Ba

所包括的研究使用以下指标评估聊天机器人对用户反应的理解:用户评估的理解、单词错误率、概念错误率和注意力估计器错误。gydF4y2Ba

20项(30.8%)研究评估了聊天机器人的理解能力,即聊天机器人充分理解用户的语言和非语言反应的能力[gydF4y2Ba 7gydF4y2Ba,gydF4y2Ba 18gydF4y2Ba,gydF4y2Ba 20.gydF4y2Ba,gydF4y2Ba 23gydF4y2Ba,gydF4y2Ba 27gydF4y2Ba,gydF4y2Ba 32gydF4y2Ba,gydF4y2Ba 33gydF4y2Ba,gydF4y2Ba 36gydF4y2Ba,gydF4y2Ba 39gydF4y2Ba,gydF4y2Ba 41gydF4y2Ba,gydF4y2Ba 42gydF4y2Ba,gydF4y2Ba 53gydF4y2Ba,gydF4y2Ba 57gydF4y2Ba,gydF4y2Ba 59gydF4y2Ba,gydF4y2Ba 63gydF4y2Ba,gydF4y2Ba 64gydF4y2Ba,gydF4y2Ba 68gydF4y2Ba,gydF4y2Ba 73gydF4y2Ba,gydF4y2Ba 78gydF4y2Ba,gydF4y2Ba 79gydF4y2Ba].在这些研究中,有两项研究评估了对语言和非语言反应的理解[gydF4y2Ba 18gydF4y2Ba,gydF4y2Ba 79gydF4y2Ba],一项研究仅评估了对非语言反应的理解[gydF4y2Ba 32gydF4y2Ba],其余的研究只评估语言反应的理解。在4项研究中,使用自填问卷中的多个问题来评估对回答的理解[gydF4y2Ba 42gydF4y2Ba,gydF4y2Ba 64gydF4y2Ba,gydF4y2Ba 78gydF4y2Ba,gydF4y2Ba 79gydF4y2Ba],两项研究的访谈[gydF4y2Ba 18gydF4y2Ba,gydF4y2Ba 68gydF4y2Ba],并在其余研究的自我管理问卷中填写一个问题。gydF4y2Ba

单词错误率,用于评估聊天机器人的语音识别性能,在使用会话日志的2项(3.7%)研究中进行了检查[gydF4y2Ba 65gydF4y2Ba,gydF4y2Ba 69gydF4y2Ba].概念错误率取决于对用户话语语义结果的正确识别,在一项研究中通过检查会话日志来评估[gydF4y2Ba 65gydF4y2Ba].注意力估计,指的是聊天机器人判断用户是盯着屏幕还是离开屏幕的能力,在一项研究中通过检查对话日志来检验[gydF4y2Ba 69gydF4y2Ba].gydF4y2Ba

与美学相关的度量gydF4y2Ba

这些研究使用以下指标评估聊天机器人的美学:虚拟代理的外观、背景颜色和内容、字体类型和大小、按钮颜色、形状、图标和背景颜色对比度。gydF4y2Ba

总共有5项(7.7%)研究使用自填问卷中的单一问题评估虚拟代理的外观[gydF4y2Ba 69gydF4y2Ba,gydF4y2Ba 77gydF4y2Ba,gydF4y2Ba 80gydF4y2Ba]、面试[gydF4y2Ba 51gydF4y2Ba],以及焦点小组[gydF4y2Ba 45gydF4y2Ba].此外,1项(1.5%)研究评估了背景颜色、颜色对比度和内容;字体类型及大小;和按钮颜色,形状和图标使用调查[gydF4y2Ba 80gydF4y2Ba].gydF4y2Ba

讨论gydF4y2Ba 主要研究结果gydF4y2Ba

很明显,目前还没有用于评估健康聊天机器人的标准方法。大多数方面是通过自我管理的问卷调查或用户访谈来研究的。常见的度量标准包括响应速度、单词错误率、概念错误率、对话效率、注意力估计和任务完成情况。各种研究评估了聊天机器人的不同方面,使直接比较复杂化。尽管其中一些变化可能是由于聊天机器人实现的个人特征及其独特的用例,但很难理解为什么响应的适当性、可理解性、真实性、响应速度、同理心和重复性等指标只适用于一小部分案例。此外,客观定量指标(例如,基于日志回顾的指标)在报告的研究中相对较少使用。因此,我们建议继续研究和开发技术指标的评估框架,并建议将其纳入聊天机器人研究的具体情况。gydF4y2Ba

Jadeja等[gydF4y2Ba 81gydF4y2Ba]介绍了评价聊天机器人的4个维度:信息检索(IR)视角、用户体验(UX)视角、语言视角和AI(类人)视角。在早期工作中[gydF4y2Ba 14gydF4y2Ba],我们调整并拓宽了这一分类,将IR视角修改为面向任务的视角,因为健康聊天机器人不一定只是为了检索信息而设计的;此外,我们还包括了系统质量和医疗保健质量的观点。排除医疗保健质量的角度,这超出了技术指标的定义,本范围审查的结果表明,所有这些维度确实都体现在健康聊天机器人的评估中。更确切地说,问题似乎是在测量什么和如何测量方面的不一致,以及对自我报告和用户体验视角的倾斜。还需要做更多的工作来提出标准指标和相应的评估工具,专门解决健康聊天机器人的质量问题。gydF4y2Ba

我们发现可用性是健康聊天机器人最常被评估的方面。系统可用性量表(SUS [gydF4y2Ba 82gydF4y2Ba,gydF4y2Ba 83gydF4y2Ba])是一个完善的可用性工具,我们观察到它被反复使用,尽管它没有在大多数评估可用性的研究中使用;在许多情况下,只使用了一个调查问题。SUS是非专有的,技术不可知的,旨在支持跨产品的比较[gydF4y2Ba 82gydF4y2Ba].因此,研究人员可以通过在评估中纳入SUS进行标准化,从而提高对健康聊天机器人用户体验的全球评估的质量和可比性。然而,Holmes等人的研究[gydF4y2Ba 84gydF4y2Ba]的研究表明,用于评估可用性和用户体验的传统方法在应用于健康聊天机器人时可能不那么准确。因此,对于健康聊天机器人的适当指标,仍有研究要做。gydF4y2Ba

每会话会话次数(CPS)已被建议作为社交聊天机器人的成功衡量标准,例如小冰[gydF4y2Ba 85gydF4y2Ba].尽管健康聊天机器人的目标与社交聊天机器人的目标不相同,但如果CPS作为社交聊天机器人领域的标准衡量标准获得认可,它将使其成为标准衡量标准的主要候选人,包括在健康聊天机器人评估中,以评估其社交参与维度。与社交维度相关的替代或补充措施是让用户对聊天机器人的同理心进行评分;但CPS具有客观定量的优点。其他客观和定量的测量,如交互时间或任务时间,可以替代CPS,但如果用户与其他任务进行多任务聊天机器人交互,则可能不如CPS具有代表性。除了社交参与,任务完成度(通常通过分析对话日志进行评估)是另一个有前景的全球性衡量标准。gydF4y2Ba

另一个需要标准化的领域是答复的质量。我们观察到反应生成被广泛测量,但方式非常不同。产生反应和理解的标准措施的出现将大大提高研究的可比性。在这一领域开发经过验证的仪器将对聊天机器人的研究做出有益的贡献。gydF4y2Ba

我们赞扬在健康聊天机器人研究中纳入分类器的性能,因为这是适用和实际的评估。由于难度的不同,比较不同领域的原始性能(如曲线下的面积)可能没有多大意义;理想情况下,聊天机器人的表现将与人类专家在手头任务中的表现进行比较。此外,我们认为,随着特定产品的成熟,健康聊天机器人研究的性能指标将有发展的机会。好的早期指标应该是那些评估响应质量和响应理解的指标,以确定产品运行良好。随后的实验可以促进自我报告的可用性评估和社会参与的度量。在适用的情况下,分类器性能可以完善技术性能评估,以确定评估临床结果的试验是否有必要。gydF4y2Ba

优势与局限gydF4y2Ba 的优势gydF4y2Ba

这项研究是第一篇综述,总结了以前的研究用于评估医疗聊天机器人的技术指标。这有助于读者了解聊天机器人在医疗保健领域的评估情况。鉴于本次评审是根据PRISMA-ScR指南执行和报告的[gydF4y2Ba 1gydF4y2Ba,它可以被认为是一篇高质量的综述。gydF4y2Ba

为了检索尽可能多的相关研究,检索了卫生和信息技术领域最常用的数据库。进一步,我们搜索谷歌Scholar,并进行向后和向前参考文献列表检查,检索灰色文献,最大限度地降低发表偏倚的风险。gydF4y2Ba

由于两名审稿人独立选择研究并提取数据,本综述的选择偏倚最小。考虑到我们没有对研究设计、研究背景、发表年份和发表国家施加限制,本综述可被视为一项全面综述。gydF4y2Ba

拉兰乔等[gydF4y2Ba 86gydF4y2Ba]综述了健康聊天机器人的特点、应用现状和评估措施。与我们的工作相反,他们并不仅仅专注于用于聊天机器人评估的技术指标。他们审查的指标包括任务完成度或单词准确性。与Laranjo等人相比[gydF4y2Ba 86gydF4y2Ba],他们只包括17篇论文,报告了14种不同的会话代理,我们的工作更全面,因为它包括65篇出版物。此外,在进行回顾时,我们有一个不同的研究问题。gydF4y2Ba

限制gydF4y2Ba

这篇综述关注的聊天机器人旨在为患者提供医疗保健服务,并在独立软件和网络浏览器上工作;它排除了使用机器人技术、严肃游戏、短信、绿野仙踪和电话的聊天机器人。因此,这篇评论没有包括许多用于为其他用户(如医生、护士和护理人员)、其他领域(如商业和教育)或其他交付模式(如SMS文本消息、Wizard-of-Oz和电话)评估聊天机器人的技术指标。上述限制适用于之前关于聊天机器人的评论,因为这些功能不是普通聊天机器人的一部分[gydF4y2Ba 87gydF4y2Ba-gydF4y2Ba 90gydF4y2Ba].gydF4y2Ba

由于实际的限制,我们无法搜索跨学科数据库(如Web of Science和ProQuest),无法进行人工搜索,也无法联系专家。此外,这篇综述中的搜索仅限于英语研究。因此,这篇综述很可能遗漏了一些研究。gydF4y2Ba

结论gydF4y2Ba

从这篇综述中,我们认识到健康聊天机器人评估人员需要在任何给定的研究或研究系列中考虑一系列方面的测量,包括可用性、社会经验、响应质量,以及在适用的情况下,分类器性能。标准措施的建立将大大提高研究之间的可比性,SUS和CPS分别作为可用性和社会经验的主要候选。理想的情况是为健康聊天机器人评估人员制定指导方针,说明应该测量什么以及在产品开发的哪个阶段。在这一领域,有效的测量仪器的开发是稀疏的,这样的仪器将有利于该领域,特别是响应质量度量。gydF4y2Ba

搜索字符串。gydF4y2Ba

数据提取表单。gydF4y2Ba

每个纳入研究的元数据和人群特征。gydF4y2Ba

每项纳入研究的干预特征。gydF4y2Ba

缩写gydF4y2Ba ACMgydF4y2Ba

计算机协会gydF4y2Ba

人工智能gydF4y2Ba

人工智能gydF4y2Ba

CINAHLgydF4y2Ba

护理及相关健康文献累积索引gydF4y2Ba

CPSgydF4y2Ba

每次会话的话题gydF4y2Ba

电子健康gydF4y2Ba

电子健康gydF4y2Ba

EMBASEgydF4y2Ba

摘录pta Medica数据库gydF4y2Ba

IEEEgydF4y2Ba

美国电气和电子工程师学会gydF4y2Ba

红外gydF4y2Ba

信息检索gydF4y2Ba

PRISMA-ScRgydF4y2Ba

系统评价和元分析的首选报告项目-范围评价的扩展gydF4y2Ba

用户体验gydF4y2Ba

用户体验gydF4y2Ba

AA在KD和MH的指导和监督下制定了方案并进行了搜索,研究选择和数据提取由MA和ZS独立进行。AA解决了两位审查员之间的任何分歧。AA综合了这些数据。AA和KD起草了手稿,并由所有作者对重要的知识内容进行了批判性的修改。KD和JW查阅相关文献并对结果进行解释。所有作者都批准了手稿的出版,并同意对工作的各个方面负责。gydF4y2Ba

没有宣布。gydF4y2Ba

透过计算机gydF4y2Ba JgydF4y2Ba 一种研究人与机器之间自然语言交流的计算机程序gydF4y2Ba Commun ACMgydF4y2Ba 1966gydF4y2Ba 9gydF4y2Ba 1gydF4y2Ba 36gydF4y2Ba 45gydF4y2Ba 10.1145/365153.365168gydF4y2Ba 弗里德曼gydF4y2Ba RgydF4y2Ba 自动电话对话评估健康行为并提供行为干预gydF4y2Ba 医学系统杂志gydF4y2Ba 1998gydF4y2Ba 04gydF4y2Ba 01gydF4y2Ba 22gydF4y2Ba 2gydF4y2Ba 95gydF4y2Ba 102gydF4y2Ba 10.1023 /: 1022695119046gydF4y2Ba 惠塔克gydF4y2Ba RgydF4y2Ba 麦克罗比gydF4y2Ba HgydF4y2Ba 布伦gydF4y2Ba CgydF4y2Ba 罗杰斯gydF4y2Ba 一个gydF4y2Ba 顾gydF4y2Ba YgydF4y2Ba 基于移动电话的戒烟干预措施gydF4y2Ba Cochrane数据库系统版本gydF4y2Ba 2016gydF4y2Ba 4gydF4y2Ba CD006611gydF4y2Ba 10.1002/14651858. cd006611.pub4gydF4y2Ba 27060875gydF4y2Ba NevegydF4y2Ba 米gydF4y2Ba 摩根gydF4y2Ba PJgydF4y2Ba 琼斯gydF4y2Ba 公关gydF4y2Ba 柯林斯gydF4y2Ba CEgydF4y2Ba 基于网络的干预在超重和肥胖成人中实现体重减轻和体重维持的有效性:一项系统回顾和荟萃分析gydF4y2Ba ob牧师gydF4y2Ba 2010gydF4y2Ba 04gydF4y2Ba 11gydF4y2Ba 4gydF4y2Ba 306gydF4y2Ba 21gydF4y2Ba 10.1111 / j.1467 - 789 x.2009.00646.xgydF4y2Ba 19754633gydF4y2Ba OBR646gydF4y2Ba 韦伯gydF4y2Ba TLgydF4y2Ba 约瑟夫gydF4y2Ba JgydF4y2Ba 亚德利gydF4y2Ba lgydF4y2Ba 米奇gydF4y2Ba 年代gydF4y2Ba 使用互联网促进健康行为改变:理论基础、行为改变技术的使用和有效性交付模式的影响的系统回顾和元分析gydF4y2Ba J医疗互联网服务gydF4y2Ba 2010gydF4y2Ba 12gydF4y2Ba 1gydF4y2Ba e4gydF4y2Ba 10.2196 / jmir.1376gydF4y2Ba 20164043gydF4y2Ba v12i1e4gydF4y2Ba PMC2836773gydF4y2Ba KeldersgydF4y2Ba SMgydF4y2Ba 角gydF4y2Ba RNgydF4y2Ba OssebaardgydF4y2Ba HCgydF4y2Ba 范Gemert-PijnengydF4y2Ba JEWCgydF4y2Ba 有说服力的系统设计确实很重要:系统地回顾基于网络的干预措施的依从性gydF4y2Ba J医疗互联网服务gydF4y2Ba 2012gydF4y2Ba 11gydF4y2Ba 14gydF4y2Ba 14gydF4y2Ba 6gydF4y2Ba e152gydF4y2Ba 10.2196 / jmir.2104gydF4y2Ba 23151820gydF4y2Ba v14i6e152gydF4y2Ba PMC3510730gydF4y2Ba 菲茨帕特里克gydF4y2Ba 乐gydF4y2Ba 达西gydF4y2Ba 一个gydF4y2Ba VierhilegydF4y2Ba 米gydF4y2Ba 使用全自动对话代理(Woebot)为有抑郁和焦虑症状的年轻人提供认知行为治疗:一项随机对照试验gydF4y2Ba JMIR Ment HealthgydF4y2Ba 2017gydF4y2Ba 06gydF4y2Ba 06gydF4y2Ba 4gydF4y2Ba 2gydF4y2Ba e19gydF4y2Ba 10.2196 / mental.7785gydF4y2Ba 28588005gydF4y2Ba v4i2e19gydF4y2Ba PMC5478797gydF4y2Ba GulshangydF4y2Ba VgydF4y2Ba 彭gydF4y2Ba lgydF4y2Ba 在面前gydF4y2Ba 米gydF4y2Ba StumpegydF4y2Ba MCgydF4y2Ba 吴gydF4y2Ba DgydF4y2Ba NarayanaswamygydF4y2Ba 一个gydF4y2Ba VenugopalangydF4y2Ba 年代gydF4y2Ba 威德纳gydF4y2Ba KgydF4y2Ba 老鸨gydF4y2Ba TgydF4y2Ba CuadrosgydF4y2Ba JgydF4y2Ba 金gydF4y2Ba RgydF4y2Ba 拉曼gydF4y2Ba RgydF4y2Ba 纳尔逊gydF4y2Ba 个人电脑gydF4y2Ba 大型gydF4y2Ba 莱托gydF4y2Ba 韦伯斯特gydF4y2Ba 博士gydF4y2Ba 开发和验证的深度学习算法检测糖尿病视网膜病变在视网膜眼底照片gydF4y2Ba 《美国医学会杂志》gydF4y2Ba 2016gydF4y2Ba 12gydF4y2Ba 13gydF4y2Ba 316gydF4y2Ba 22gydF4y2Ba 2402gydF4y2Ba 2410gydF4y2Ba 10.1001 / jama.2016.17216gydF4y2Ba 27898976gydF4y2Ba 2588763gydF4y2Ba 代替gydF4y2Ba WWgydF4y2Ba 人工智能和深度学习的临床意义和挑战gydF4y2Ba 《美国医学会杂志》gydF4y2Ba 2018gydF4y2Ba 09gydF4y2Ba 18gydF4y2Ba 320gydF4y2Ba 11gydF4y2Ba 1107gydF4y2Ba 1108gydF4y2Ba 10.1001 / jama.2018.11029gydF4y2Ba 30178025gydF4y2Ba 2701665gydF4y2Ba 周gydF4y2Ba lgydF4y2Ba 高gydF4y2Ba JgydF4y2Ba 李gydF4y2Ba DgydF4y2Ba ShumgydF4y2Ba HgydF4y2Ba 同理心社交聊天机器人小冰的设计与实现gydF4y2Ba 计算语言学gydF4y2Ba 2020gydF4y2Ba 03gydF4y2Ba 46gydF4y2Ba 1gydF4y2Ba 53gydF4y2Ba 93gydF4y2Ba 10.1162 / coli_a_00368gydF4y2Ba 克伦克gydF4y2Ba KgydF4y2Ba 斯皮策gydF4y2Ba RLgydF4y2Ba 威廉姆斯gydF4y2Ba 简森-巴顿gydF4y2Ba PHQ-9:一个简短的抑郁症严重程度测量的有效性gydF4y2Ba J Gen实习生gydF4y2Ba 2001gydF4y2Ba 09gydF4y2Ba 16gydF4y2Ba 9gydF4y2Ba 606gydF4y2Ba 13gydF4y2Ba 11556941gydF4y2Ba jgi01114gydF4y2Ba PMC1495268gydF4y2Ba 为人gydF4y2Ba 公关gydF4y2Ba 伯恩gydF4y2Ba JgydF4y2Ba 阿伦gydF4y2Ba DgydF4y2Ba 祭祀gydF4y2Ba RMgydF4y2Ba TschanzgydF4y2Ba 国会议员gydF4y2Ba PogachgydF4y2Ba lgydF4y2Ba 2017年美国退伍军人事务部/美国国防部临床实践指南:2型糖尿病的管理gydF4y2Ba 实习医生gydF4y2Ba 2017gydF4y2Ba 11gydF4y2Ba 07gydF4y2Ba 167gydF4y2Ba 9gydF4y2Ba 655gydF4y2Ba 663gydF4y2Ba 10.7326 / m17 - 1362gydF4y2Ba 29059687gydF4y2Ba 2659342gydF4y2Ba KocaballigydF4y2Ba 一个gydF4y2Ba 一个gydF4y2Ba JgydF4y2Ba RezazadegangydF4y2Ba DgydF4y2Ba BerkovskygydF4y2Ba 年代gydF4y2Ba MagrabigydF4y2Ba FgydF4y2Ba CoieragydF4y2Ba EgydF4y2Ba 对话代理对健康和生活方式提示的反应:适当性和表达结构的调查gydF4y2Ba J医疗互联网服务gydF4y2Ba 2020gydF4y2Ba 22gydF4y2Ba 2gydF4y2Ba e15823gydF4y2Ba 10.2196 / preprints.15823gydF4y2Ba DeneckegydF4y2Ba KgydF4y2Ba 沃伦gydF4y2Ba JgydF4y2Ba 如何用对话式用户界面评估健康应用程序?gydF4y2Ba 卫生技术与信息学研究“,gydF4y2Ba 2020gydF4y2Ba 1gydF4y2Ba 9gydF4y2Ba TriccogydF4y2Ba 交流gydF4y2Ba 莉莉·gydF4y2Ba EgydF4y2Ba ZaringydF4y2Ba WgydF4y2Ba O ' briengydF4y2Ba 乐gydF4y2Ba ColquhoungydF4y2Ba HgydF4y2Ba LevacgydF4y2Ba DgydF4y2Ba 莫赫gydF4y2Ba DgydF4y2Ba 彼得斯gydF4y2Ba 医学博士gydF4y2Ba 霍斯利gydF4y2Ba TgydF4y2Ba 周gydF4y2Ba lgydF4y2Ba 亨佩尔gydF4y2Ba 年代gydF4y2Ba 阿克勒说道gydF4y2Ba EAgydF4y2Ba 常gydF4y2Ba CgydF4y2Ba 麦高文gydF4y2Ba JgydF4y2Ba 斯图尔特gydF4y2Ba lgydF4y2Ba 哈特尔gydF4y2Ba lgydF4y2Ba AldcroftgydF4y2Ba 一个gydF4y2Ba 威尔逊gydF4y2Ba 毫克gydF4y2Ba GarrittygydF4y2Ba CgydF4y2Ba 列文gydF4y2Ba 年代gydF4y2Ba 戈弗雷gydF4y2Ba 厘米gydF4y2Ba 麦克唐纳gydF4y2Ba 太gydF4y2Ba LangloisgydF4y2Ba 电动汽车gydF4y2Ba Soares-WeisergydF4y2Ba KgydF4y2Ba 莫里亚蒂gydF4y2Ba JgydF4y2Ba 克利福德gydF4y2Ba TgydF4y2Ba TuncalpgydF4y2Ba OgydF4y2Ba 施特劳斯gydF4y2Ba SEgydF4y2Ba 用于范围审查的PRISMA扩展(PRISMA- scr):检查表和解释gydF4y2Ba 实习医生gydF4y2Ba 2018gydF4y2Ba 10gydF4y2Ba 02gydF4y2Ba 169gydF4y2Ba 7gydF4y2Ba 467gydF4y2Ba 473gydF4y2Ba 10.7326 / m18 - 0850gydF4y2Ba 30178033gydF4y2Ba 2700389gydF4y2Ba 奥特曼gydF4y2Ba DgydF4y2Ba 医学研究的实用统计学gydF4y2Ba 1990gydF4y2Ba 伦敦gydF4y2Ba 查普曼&霍尔/CRCgydF4y2Ba 阿卜杜拉gydF4y2Ba 作为gydF4y2Ba GaehdegydF4y2Ba 年代gydF4y2Ba 比克摩尔gydF4y2Ba TgydF4y2Ba 基于平板电脑的会话代理促进退伍军人戒烟:可行性研究gydF4y2Ba J流行病Glob健康gydF4y2Ba 2018gydF4y2Ba 12gydF4y2Ba 8gydF4y2Ba 3 - 4gydF4y2Ba 225gydF4y2Ba 230gydF4y2Ba 10.2991 / j.jegh.2018.08.104gydF4y2Ba 30864768gydF4y2Ba j8/3-4/225gydF4y2Ba 阿里gydF4y2Ba 米gydF4y2Ba RasazigydF4y2Ba ZgydF4y2Ba 马蒙gydF4y2Ba 一个gydF4y2Ba 朗之万gydF4y2Ba RgydF4y2Ba RawassizadehgydF4y2Ba RgydF4y2Ba 舒伯特gydF4y2Ba lgydF4y2Ba 自闭症青少年的虚拟对话代理:实验结果和设计课程gydF4y2Ba arXivgydF4y2Ba 2018gydF4y2Ba 1gydF4y2Ba 13gydF4y2Ba BeileygydF4y2Ba 米gydF4y2Ba 心理健康和健康聊天机器人gydF4y2Ba 2019gydF4y2Ba 美国gydF4y2Ba 亚利桑那大学gydF4y2Ba 比克摩尔gydF4y2Ba TgydF4y2Ba 卡鲁索gydF4y2Ba lgydF4y2Ba Clough-GorrgydF4y2Ba KgydF4y2Ba 城市老年人对关系代理界面的接受度和可用性gydF4y2Ba CHI'05关于计算系统中的人为因素的扩展摘要:ACMgydF4y2Ba 2005gydF4y2Ba 05年gydF4y2Ba 4月gydF4y2Ba 波特兰,OR,美国gydF4y2Ba 1212gydF4y2Ba 1215gydF4y2Ba 10.1145/1056808.1056879gydF4y2Ba 比克摩尔gydF4y2Ba 太瓦gydF4y2Ba 具有gydF4y2Ba lgydF4y2Ba 杰克gydF4y2Ba BWgydF4y2Ba 花时间去关心gydF4y2Ba 2009gydF4y2Ba 第27届计算机系统中的人为因素国际会议论文集- CHI 09gydF4y2Ba 2009gydF4y2Ba 波士顿gydF4y2Ba 10.1145/1518701.1518891gydF4y2Ba 比克摩尔gydF4y2Ba 太瓦gydF4y2Ba 米切尔gydF4y2Ba SEgydF4y2Ba 杰克gydF4y2Ba BWgydF4y2Ba Paasche-OrlowgydF4y2Ba 可gydF4y2Ba 具有gydF4y2Ba LMgydF4y2Ba OdonnellgydF4y2Ba JgydF4y2Ba 有抑郁症状的住院患者对关系因子的反应gydF4y2Ba 交互第一版gydF4y2Ba 2010gydF4y2Ba 07gydF4y2Ba 01gydF4y2Ba 22gydF4y2Ba 4gydF4y2Ba 289gydF4y2Ba 298gydF4y2Ba 10.1016 / j.intcom.2009.12.001gydF4y2Ba 20628581gydF4y2Ba PMC2901553gydF4y2Ba 比克摩尔gydF4y2Ba 太瓦gydF4y2Ba 具有gydF4y2Ba LMgydF4y2Ba 拜伦gydF4y2Ba DgydF4y2Ba 活力四射gydF4y2Ba 年代gydF4y2Ba HenaultgydF4y2Ba 勒gydF4y2Ba 杰克gydF4y2Ba BWgydF4y2Ba 希里曼gydF4y2Ba RgydF4y2Ba Paasche-OrlowgydF4y2Ba 可gydF4y2Ba 健康素养不足的患者会话代理的可用性:来自两个临床试验的证据gydF4y2Ba J健康社区gydF4y2Ba 2010gydF4y2Ba 15补充2gydF4y2Ba 197gydF4y2Ba 210gydF4y2Ba 10.1080 / 10810730.2010.499991gydF4y2Ba 20845204gydF4y2Ba 926954323gydF4y2Ba 比克摩尔gydF4y2Ba 太瓦gydF4y2Ba PuskargydF4y2Ba KgydF4y2Ba SchlenkgydF4y2Ba EAgydF4y2Ba 具有gydF4y2Ba LMgydF4y2Ba SereikagydF4y2Ba SMgydF4y2Ba 维持现实:抗精神病药物依从性的相关药物gydF4y2Ba 与电脑互动gydF4y2Ba 2010gydF4y2Ba 7gydF4y2Ba 22gydF4y2Ba 4gydF4y2Ba 276gydF4y2Ba 288gydF4y2Ba 10.1016 / j.intcom.2010.02.001gydF4y2Ba 比克摩尔gydF4y2Ba 太瓦gydF4y2Ba 舒尔曼gydF4y2Ba DgydF4y2Ba SidnergydF4y2Ba CgydF4y2Ba 使用对话代理对多种健康行为进行自动化干预gydF4y2Ba 病人教育计数gydF4y2Ba 2013gydF4y2Ba 08gydF4y2Ba 92gydF4y2Ba 2gydF4y2Ba 142gydF4y2Ba 8gydF4y2Ba 10.1016 / j.pec.2013.05.011gydF4y2Ba 23763983gydF4y2Ba s0738 - 3991 (13) 00211 - 5gydF4y2Ba PMC3727973gydF4y2Ba BresogydF4y2Ba 一个gydF4y2Ba Martinez-MirandagydF4y2Ba JgydF4y2Ba BotellagydF4y2Ba CgydF4y2Ba BanosgydF4y2Ba RMgydF4y2Ba Garcia-GomezgydF4y2Ba JMgydF4y2Ba 移情虚拟代理预防重度抑郁症的可用性和可接受性评估gydF4y2Ba 专家系统gydF4y2Ba 2016gydF4y2Ba 05gydF4y2Ba 25gydF4y2Ba 33gydF4y2Ba 4gydF4y2Ba 297gydF4y2Ba 312gydF4y2Ba 10.1111 / EXSY.12151gydF4y2Ba 2016gydF4y2Ba 卡梅隆gydF4y2Ba GgydF4y2Ba 卡梅隆gydF4y2Ba DgydF4y2Ba MegawgydF4y2Ba GgydF4y2Ba 债券gydF4y2Ba RgydF4y2Ba 马尔文尼gydF4y2Ba 米gydF4y2Ba 奥尼尔gydF4y2Ba 年代gydF4y2Ba 评估精神卫生保健聊天机器人的可用性gydF4y2Ba 互联网科学gydF4y2Ba 2019gydF4y2Ba 可汗gydF4y2Ba 121gydF4y2Ba 132gydF4y2Ba 10.1007 / 978 - 3 - 030 - 17705 - 8 - _11gydF4y2Ba ComendadorgydF4y2Ba 贝芙gydF4y2Ba 旧金山gydF4y2Ba BMBgydF4y2Ba MedenillagydF4y2Ba JSgydF4y2Ba 《gydF4y2Ba SMTgydF4y2Ba 冰塔gydF4y2Ba 此种gydF4y2Ba Pharmabot:儿科仿制药顾问聊天机器人gydF4y2Ba JOACEgydF4y2Ba 2015gydF4y2Ba 3.gydF4y2Ba 2gydF4y2Ba 137gydF4y2Ba 140gydF4y2Ba 10.12720 / joace.3.2.137 - 140gydF4y2Ba 克鲁岑gydF4y2Ba RgydF4y2Ba 彼得斯gydF4y2Ba 孔侑gydF4y2Ba 葡萄牙gydF4y2Ba SDgydF4y2Ba 可裂变物质gydF4y2Ba 新兴市场gydF4y2Ba GrollemangydF4y2Ba JJgydF4y2Ba 一种人工智能聊天代理,可以回答青少年有关性、毒品和酒精的问题:一项探索性研究gydF4y2Ba 青少年健康gydF4y2Ba 2011gydF4y2Ba 05gydF4y2Ba 48gydF4y2Ba 5gydF4y2Ba 514gydF4y2Ba 9gydF4y2Ba 10.1016 / j.jadohealth.2010.09.002gydF4y2Ba 21501812gydF4y2Ba s1054 - 139 x (10) 00430 - 1gydF4y2Ba DemircigydF4y2Ba HgydF4y2Ba woebot在支持主观幸福感方面的会话代理的用户体验随时间的案例研究gydF4y2Ba 2018gydF4y2Ba 火鸡gydF4y2Ba 中东技术大学gydF4y2Ba DeneckegydF4y2Ba KgydF4y2Ba HochreutenergydF4y2Ba 年代gydF4y2Ba PopelgydF4y2Ba 一个gydF4y2Ba 五月gydF4y2Ba RgydF4y2Ba 使用对话式用户界面的自我回忆:概念与可用性研究gydF4y2Ba 方法gydF4y2Ba 2019gydF4y2Ba 03gydF4y2Ba 15gydF4y2Ba 57gydF4y2Ba 05/06gydF4y2Ba 243gydF4y2Ba 252gydF4y2Ba 10.1055 / s - 0038 - 1675822gydF4y2Ba DeVaultgydF4y2Ba DgydF4y2Ba ArtsteingydF4y2Ba RgydF4y2Ba BenngydF4y2Ba GgydF4y2Ba 戴伊gydF4y2Ba TgydF4y2Ba 快gydF4y2Ba EgydF4y2Ba 获得者gydF4y2Ba 一个gydF4y2Ba GeorgilagydF4y2Ba KgydF4y2Ba GratchgydF4y2Ba JgydF4y2Ba HartholtgydF4y2Ba 一个gydF4y2Ba LhommetgydF4y2Ba 米gydF4y2Ba 卢卡斯gydF4y2Ba GgydF4y2Ba MarsellagydF4y2Ba 年代gydF4y2Ba MorbinigydF4y2Ba FgydF4y2Ba NazariangydF4y2Ba 一个gydF4y2Ba 谢勒gydF4y2Ba 年代gydF4y2Ba StratougydF4y2Ba GgydF4y2Ba 苏瑞gydF4y2Ba 一个gydF4y2Ba TraumgydF4y2Ba DgydF4y2Ba 木gydF4y2Ba RgydF4y2Ba 徐gydF4y2Ba YgydF4y2Ba 里索gydF4y2Ba 一个gydF4y2Ba 莫伦西gydF4y2Ba LPgydF4y2Ba SimSensei kiosk:用于医疗保健决策支持的虚拟人类访谈器gydF4y2Ba 2014gydF4y2Ba 国际自主代理和多代理系统基金会gydF4y2Ba 2014年5月gydF4y2Ba 巴黎gydF4y2Ba 1061gydF4y2Ba 1068gydF4y2Ba 德沃金gydF4y2Ba 女士gydF4y2Ba 李gydF4y2Ba 年代gydF4y2Ba ChakrabortygydF4y2Ba 一个gydF4y2Ba 纳汉gydF4y2Ba CgydF4y2Ba Hightow-WeidmangydF4y2Ba lgydF4y2Ba GarofalogydF4y2Ba RgydF4y2Ba QatogydF4y2Ba DMgydF4y2Ba 刘gydF4y2Ba lgydF4y2Ba 吉梅内斯gydF4y2Ba 一个gydF4y2Ba 一种基于理论的关系嵌入会话代理手机干预促进年轻HIV阳性非洲裔MSM艾滋病药物依从性的可接受性、可行性和初步疗效gydF4y2Ba 艾滋病教育gydF4y2Ba 2019gydF4y2Ba 02gydF4y2Ba 31gydF4y2Ba 1gydF4y2Ba 17gydF4y2Ba 37gydF4y2Ba 10.1521 / aeap.2019.31.1.17gydF4y2Ba 30742481gydF4y2Ba ElmasrigydF4y2Ba DgydF4y2Ba maedgydF4y2Ba 一个gydF4y2Ba 在线心理健康干预的会话代理gydF4y2Ba 脑信息学与健康:国际会议gydF4y2Ba 2016gydF4y2Ba 《脑信息学与健康》,2016gydF4y2Ba 10月13 - 16gydF4y2Ba 奥马哈,美国东北部gydF4y2Ba 243gydF4y2Ba 251gydF4y2Ba 10.1007 / 978 - 3 - 319 - 47103 - 7 -大于gydF4y2Ba FadhilgydF4y2Ba 一个gydF4y2Ba 舒阿佛gydF4y2Ba GgydF4y2Ba VillafioritagydF4y2Ba 一个gydF4y2Ba 基金会gydF4y2Ba BgydF4y2Ba ollobot -面向基于文本的阿拉伯语健康对话代理评估和结果gydF4y2Ba 2019gydF4y2Ba 自然语言处理最新进展gydF4y2Ba 2019gydF4y2Ba 瓦尔纳gydF4y2Ba 295gydF4y2Ba 303gydF4y2Ba 10.26615 / 978 - 954 - 452 - 056 - 4 - _034gydF4y2Ba GriolgydF4y2Ba DgydF4y2Ba CallejasgydF4y2Ba ZgydF4y2Ba 用于上下文感知护理应用程序的移动会话代理gydF4y2Ba Cogn第一版gydF4y2Ba 2015gydF4y2Ba 8gydF4y2Ba 21gydF4y2Ba 8gydF4y2Ba 2gydF4y2Ba 336gydF4y2Ba 356gydF4y2Ba 10.1007 / s12559 - 015 - 9352 - xgydF4y2Ba 汉克gydF4y2Ba 年代gydF4y2Ba SandnergydF4y2Ba EgydF4y2Ba 卡德罗夫gydF4y2Ba 年代gydF4y2Ba Stainer-HochgatterergydF4y2Ba 一个gydF4y2Ba 通过虚拟支持伙伴在家提供日常生活支持gydF4y2Ba 2016gydF4y2Ba 第二届IET积极和辅助生活技术国际会议(TechAAL)gydF4y2Ba 2016gydF4y2Ba 伦敦gydF4y2Ba 1gydF4y2Ba 7gydF4y2Ba 10.1049 / ic.2016.0058gydF4y2Ba 赫斯gydF4y2Ba GgydF4y2Ba 弗里克gydF4y2Ba GgydF4y2Ba DeneckegydF4y2Ba KgydF4y2Ba 改进和评估eMMA?it’沟通技巧:管理药物的聊天机器人gydF4y2Ba 卫生技术和信息学研究gydF4y2Ba 2019gydF4y2Ba 259gydF4y2Ba 101gydF4y2Ba 104gydF4y2Ba KadariyagydF4y2Ba DgydF4y2Ba VenkataramanangydF4y2Ba RgydF4y2Ba 叫喊声gydF4y2Ba HgydF4y2Ba 卡尔拉gydF4y2Ba 米gydF4y2Ba ThirunarayanangydF4y2Ba KgydF4y2Ba ShethgydF4y2Ba 一个gydF4y2Ba kBot:基于知识的个性化哮喘自我管理聊天机器人gydF4y2Ba 2019gydF4y2Ba IEEE智能计算国际会议(SMARTCOMP)gydF4y2Ba 2019gydF4y2Ba 华盛顿gydF4y2Ba 138gydF4y2Ba 143gydF4y2Ba 10.1109 / smartcomp.2019.00043gydF4y2Ba KowatschgydF4y2Ba TgydF4y2Ba 奥托gydF4y2Ba lgydF4y2Ba HarperinkgydF4y2Ba 年代gydF4y2Ba CottigydF4y2Ba 一个gydF4y2Ba SchlietergydF4y2Ba HgydF4y2Ba 数字卫生干预措施的设计和评估框架gydF4y2Ba 资讯科技-资讯科技gydF4y2Ba 2019gydF4y2Ba 61gydF4y2Ba 5 - 6gydF4y2Ba 253gydF4y2Ba 263gydF4y2Ba 10.1515 /它- 2019 - 0019gydF4y2Ba LisettigydF4y2Ba CgydF4y2Ba AminigydF4y2Ba RgydF4y2Ba YasavurgydF4y2Ba UgydF4y2Ba RishegydF4y2Ba NgydF4y2Ba 我可以帮你改变!移情虚拟代理提供行为改变健康干预gydF4y2Ba ACM Trans Manage Inf系统gydF4y2Ba 2013gydF4y2Ba 12gydF4y2Ba 01gydF4y2Ba 4gydF4y2Ba 4gydF4y2Ba 1gydF4y2Ba 28gydF4y2Ba 10.1145 / 2544103gydF4y2Ba 马格纳尼gydF4y2Ba JWgydF4y2Ba SchlussergydF4y2Ba CLgydF4y2Ba KimanigydF4y2Ba EgydF4y2Ba 操纵者gydF4y2Ba 提单gydF4y2Ba Paasche-OrlowgydF4y2Ba 可gydF4y2Ba 比克摩尔gydF4y2Ba 太瓦gydF4y2Ba 心房颤动健康素养信息技术系统:试点评估gydF4y2Ba JMIR有氧运动gydF4y2Ba 2017gydF4y2Ba 1gydF4y2Ba 2gydF4y2Ba e7gydF4y2Ba 10.2196 / cardio.8543gydF4y2Ba 29473644gydF4y2Ba PMC5818980gydF4y2Ba Micoulaud-FranchigydF4y2Ba JgydF4y2Ba SagaspegydF4y2Ba PgydF4y2Ba 德gydF4y2Ba SEgydF4y2Ba BioulacgydF4y2Ba 年代gydF4y2Ba SauteraudgydF4y2Ba 一个gydF4y2Ba 菲利普gydF4y2Ba PgydF4y2Ba 在医疗保健上下文中嵌入会话代理的可接受性gydF4y2Ba 智能虚拟代理gydF4y2Ba 2016gydF4y2Ba 416gydF4y2Ba 419gydF4y2Ba 10.1007 / 978 - 3 - 319 - 47665 - 0 - _45gydF4y2Ba 米尔恩gydF4y2Ba 米gydF4y2Ba LuerssengydF4y2Ba 米gydF4y2Ba 刘易斯gydF4y2Ba TgydF4y2Ba LeibbrandtgydF4y2Ba RgydF4y2Ba 权力gydF4y2Ba DgydF4y2Ba 为自闭症谱系障碍儿童开发基于虚拟代理的社会导师。2010国际神经网络联合会议(IJCNN)gydF4y2Ba 2010gydF4y2Ba 2010国际神经网络联合会议(IJCNN)gydF4y2Ba 2010年7月gydF4y2Ba 巴塞罗那gydF4y2Ba 18gydF4y2Ba 23gydF4y2Ba 10.1109 / ijcnn.2010.5596584gydF4y2Ba SchmidlengydF4y2Ba TgydF4y2Ba 施瓦兹gydF4y2Ba 米gydF4y2Ba DiLoretogydF4y2Ba KgydF4y2Ba 基什内尔gydF4y2Ba 霍奇金淋巴瘤gydF4y2Ba SturmgydF4y2Ba 交流gydF4y2Ba 对聊天机器人进行患者评估,以提供可扩展的遗传咨询gydF4y2Ba 杰内·康斯gydF4y2Ba 2019gydF4y2Ba 12gydF4y2Ba 28gydF4y2Ba 6gydF4y2Ba 1166gydF4y2Ba 1177gydF4y2Ba 10.1002 / jgc4.1169gydF4y2Ba 31549758gydF4y2Ba 施罗德gydF4y2Ba JgydF4y2Ba 威尔克斯gydF4y2Ba CgydF4y2Ba 罗文gydF4y2Ba KgydF4y2Ba 托莱多gydF4y2Ba 一个gydF4y2Ba 天堂gydF4y2Ba 一个gydF4y2Ba CzerwinskigydF4y2Ba 米gydF4y2Ba 口袋技能:支持辩证行为疗法的会话移动Web应用程序gydF4y2Ba 2018gydF4y2Ba 2018年CHI计算系统人为因素会议gydF4y2Ba 2018gydF4y2Ba 蒙特利尔gydF4y2Ba 加拿大gydF4y2Ba ACMgydF4y2Ba 1gydF4y2Ba 15gydF4y2Ba 10.1145/3173574.3173972gydF4y2Ba 史密斯gydF4y2Ba 乔丹gydF4y2Ba 姜gydF4y2Ba EJgydF4y2Ba 莱特gydF4y2Ba 米gydF4y2Ba 莱特gydF4y2Ba KgydF4y2Ba 水上旅馆嗯gydF4y2Ba lgydF4y2Ba 奥尔森gydF4y2Ba DgydF4y2Ba 贝尔gydF4y2Ba 医学博士gydF4y2Ba 弗莱明gydF4y2Ba 曼氏金融gydF4y2Ba 为精神残疾人士提供虚拟现实求职面试培训gydF4y2Ba 神经病gydF4y2Ba 2014gydF4y2Ba 09gydF4y2Ba 202gydF4y2Ba 9gydF4y2Ba 659gydF4y2Ba 67gydF4y2Ba 10.1097 / NMD.0000000000000187gydF4y2Ba 25099298gydF4y2Ba PMC4149584gydF4y2Ba 史密斯gydF4y2Ba 乔丹gydF4y2Ba 姜gydF4y2Ba EJgydF4y2Ba 莱特gydF4y2Ba KgydF4y2Ba 莱特gydF4y2Ba 妈gydF4y2Ba 泰勒gydF4y2Ba 莱托gydF4y2Ba 嗯gydF4y2Ba 磅gydF4y2Ba 奥尔森gydF4y2Ba 德gydF4y2Ba 贝尔gydF4y2Ba 医学博士gydF4y2Ba 弗莱明gydF4y2Ba 曼氏金融gydF4y2Ba 自闭症谱系障碍成人虚拟现实求职面试培训gydF4y2Ba J自闭症开发障碍gydF4y2Ba 2014gydF4y2Ba 10gydF4y2Ba 44gydF4y2Ba 10gydF4y2Ba 2450gydF4y2Ba 63gydF4y2Ba 10.1007 / s10803 - 014 - 2113 - ygydF4y2Ba 24803366gydF4y2Ba PMC4167908gydF4y2Ba 史密斯gydF4y2Ba 乔丹gydF4y2Ba 嗯gydF4y2Ba 磅gydF4y2Ba 弗莱明gydF4y2Ba 曼氏金融gydF4y2Ba 约旦gydF4y2Ba NgydF4y2Ba 莱特gydF4y2Ba 妈gydF4y2Ba 姜gydF4y2Ba EJgydF4y2Ba 莱特gydF4y2Ba KgydF4y2Ba 奥尔森gydF4y2Ba DgydF4y2Ba 贝尔gydF4y2Ba 医学博士gydF4y2Ba 为患有创伤后应激障碍的退伍军人提供虚拟现实工作面试培训gydF4y2Ba J Vocat RehabilgydF4y2Ba 2015gydF4y2Ba 42gydF4y2Ba 3.gydF4y2Ba 271gydF4y2Ba 279gydF4y2Ba 10.3233 /日前- 150748gydF4y2Ba 27721645gydF4y2Ba PMC5051574gydF4y2Ba 田中gydF4y2Ba HgydF4y2Ba 萨克蒂gydF4y2Ba 年代gydF4y2Ba NeubiggydF4y2Ba GgydF4y2Ba 户田拓夫gydF4y2Ba TgydF4y2Ba NegorogydF4y2Ba HgydF4y2Ba IwasakagydF4y2Ba HgydF4y2Ba 自动社交技能培训器gydF4y2Ba 2015gydF4y2Ba 第20届智能用户界面国际会议gydF4y2Ba 2015gydF4y2Ba 亚特兰大gydF4y2Ba 10.1145/2678025.2701368gydF4y2Ba 汤普森gydF4y2Ba DgydF4y2Ba 卡兰德gydF4y2Ba CgydF4y2Ba GonynorgydF4y2Ba CgydF4y2Ba 卡伦gydF4y2Ba 千瓦gydF4y2Ba 雷东多gydF4y2Ba 乔丹gydF4y2Ba 巴特勒gydF4y2Ba 一个gydF4y2Ba 安德森gydF4y2Ba BJgydF4y2Ba 在糖尿病家庭团队在线干预中使用关系代理促进1型糖尿病自我管理的家庭沟通:纵向试点研究gydF4y2Ba J医疗互联网服务gydF4y2Ba 2019gydF4y2Ba 09gydF4y2Ba 13gydF4y2Ba 21gydF4y2Ba 9gydF4y2Ba e15318gydF4y2Ba 10.2196/15318gydF4y2Ba 31538940gydF4y2Ba v21i9e15318gydF4y2Ba PMC6754689gydF4y2Ba TielmangydF4y2Ba 毫升gydF4y2Ba NeerincxgydF4y2Ba 妈gydF4y2Ba BidarragydF4y2Ba RgydF4y2Ba KybartasgydF4y2Ba BgydF4y2Ba 边缘主义者gydF4y2Ba WgydF4y2Ba 使用虚拟代理和虚拟故事重建创伤记忆的创伤后应激障碍治疗系统gydF4y2Ba J医学系统gydF4y2Ba 2017gydF4y2Ba 08gydF4y2Ba 41gydF4y2Ba 8gydF4y2Ba 125gydF4y2Ba 10.1007 / s10916 - 017 - 0771 - ygydF4y2Ba 28699083gydF4y2Ba 10.1007 / s10916 - 017 - 0771 - ygydF4y2Ba PMC5506234gydF4y2Ba YasavurgydF4y2Ba UgydF4y2Ba LisettigydF4y2Ba CgydF4y2Ba RishegydF4y2Ba NgydF4y2Ba 让我们谈谈!言语虚拟咨询师为你提供简短的干预gydF4y2Ba J多模态用户界面gydF4y2Ba 2014gydF4y2Ba 9gydF4y2Ba 5gydF4y2Ba 8gydF4y2Ba 4gydF4y2Ba 381gydF4y2Ba 398gydF4y2Ba 10.1007 / s12193 - 014 - 0169 - 9gydF4y2Ba 阿玛托gydF4y2Ba FgydF4y2Ba 马伦gydF4y2Ba 年代gydF4y2Ba 麝香gydF4y2Ba VgydF4y2Ba PiantadosigydF4y2Ba GgydF4y2Ba PicariellogydF4y2Ba 一个gydF4y2Ba 桑松gydF4y2Ba CgydF4y2Ba 聊天机器人遇到eHealth:自动化医疗保健gydF4y2Ba 2017gydF4y2Ba 人工智能及其在卫生领域的应用研讨会gydF4y2Ba 2017gydF4y2Ba 巴里gydF4y2Ba 1gydF4y2Ba 10gydF4y2Ba AuriacombegydF4y2Ba 米gydF4y2Ba MoriceaugydF4y2Ba 年代gydF4y2Ba SerregydF4y2Ba FgydF4y2Ba 丹尼斯gydF4y2Ba CgydF4y2Ba Micoulaud-FranchigydF4y2Ba JgydF4y2Ba 德西维因gydF4y2Ba EgydF4y2Ba BonhommegydF4y2Ba EgydF4y2Ba BioulacgydF4y2Ba 年代gydF4y2Ba FatseasgydF4y2Ba 米gydF4y2Ba 菲利普gydF4y2Ba PgydF4y2Ba 开发和验证用于筛查烟草和酒精使用障碍的虚拟试剂gydF4y2Ba 药物和酒精依赖gydF4y2Ba 2018gydF4y2Ba 12gydF4y2Ba 193gydF4y2Ba 6gydF4y2Ba 1gydF4y2Ba 6gydF4y2Ba 10.1016 / J.drugalcdep.2018.08.025gydF4y2Ba 2018gydF4y2Ba 戈什gydF4y2Ba 年代gydF4y2Ba 巴蒂亚gydF4y2Ba 年代gydF4y2Ba 巴蒂亚gydF4y2Ba 一个gydF4y2Ba Quro:使用个性化聊天机器人对话系统促进用户症状检查gydF4y2Ba 种马健康技术通知gydF4y2Ba 2018gydF4y2Ba 252gydF4y2Ba 51gydF4y2Ba 56gydF4y2Ba 30040682gydF4y2Ba 英克斯特gydF4y2Ba BgydF4y2Ba SardagydF4y2Ba 年代gydF4y2Ba 萨勃拉曼尼亚gydF4y2Ba VgydF4y2Ba 数字心理健康的共情驱动对话人工智能代理(Wysa):真实世界数据评估混合方法研究gydF4y2Ba JMIR mHealth uHealthgydF4y2Ba 2018gydF4y2Ba 11gydF4y2Ba 23gydF4y2Ba 6gydF4y2Ba 11gydF4y2Ba e12106gydF4y2Ba 10.2196/12106gydF4y2Ba 30470676gydF4y2Ba v6i11e12106gydF4y2Ba 倪gydF4y2Ba lgydF4y2Ba 陆gydF4y2Ba CgydF4y2Ba 刘gydF4y2Ba NgydF4y2Ba 刘gydF4y2Ba JgydF4y2Ba 曼迪:迈向智能初级保健聊天机器人应用gydF4y2Ba 知识与系统科学gydF4y2Ba 2017gydF4y2Ba 38gydF4y2Ba 52gydF4y2Ba 10.1007 / 978 - 981 - 10 - 6989 - 5 - _4gydF4y2Ba 菲利普gydF4y2Ba PgydF4y2Ba BioulacgydF4y2Ba 年代gydF4y2Ba SauteraudgydF4y2Ba 一个gydF4y2Ba ChauftongydF4y2Ba CgydF4y2Ba 橄榄gydF4y2Ba JgydF4y2Ba 虚拟人可以用来探索病人白天过度嗜睡吗?gydF4y2Ba 存在:远程操作者和虚拟环境gydF4y2Ba 2014gydF4y2Ba 11gydF4y2Ba 23gydF4y2Ba 4gydF4y2Ba 369gydF4y2Ba 376gydF4y2Ba 10.1162 / pres_a_00197gydF4y2Ba 菲利普gydF4y2Ba PgydF4y2Ba Micoulaud-FranchigydF4y2Ba JgydF4y2Ba SagaspegydF4y2Ba PgydF4y2Ba 西维因gydF4y2Ba 艾德gydF4y2Ba 橄榄gydF4y2Ba JgydF4y2Ba BioulacgydF4y2Ba 年代gydF4y2Ba SauteraudgydF4y2Ba 一个gydF4y2Ba 虚拟人作为一种新的诊断工具,是重性抑郁症领域的概念验证研究gydF4y2Ba Sci代表gydF4y2Ba 2017gydF4y2Ba 02gydF4y2Ba 16gydF4y2Ba 7gydF4y2Ba 42656gydF4y2Ba 10.1038 / srep42656gydF4y2Ba 28205601gydF4y2Ba srep42656gydF4y2Ba PMC5311989gydF4y2Ba 田中gydF4y2Ba HgydF4y2Ba 足立gydF4y2Ba HgydF4y2Ba UkitagydF4y2Ba NgydF4y2Ba IkedagydF4y2Ba 米gydF4y2Ba KazuigydF4y2Ba HgydF4y2Ba 荣誉gydF4y2Ba TgydF4y2Ba 中村gydF4y2Ba 年代gydF4y2Ba 通过交互式计算机化身检测痴呆症gydF4y2Ba IEEE翻译英健康医学杂志gydF4y2Ba 2017gydF4y2Ba 5gydF4y2Ba 1gydF4y2Ba 11gydF4y2Ba 10.1109 / jtehm.2017.2752152gydF4y2Ba 加德纳gydF4y2Ba 点gydF4y2Ba 麦丘gydF4y2Ba KDgydF4y2Ba NegashgydF4y2Ba LMgydF4y2Ba 程gydF4y2Ba TgydF4y2Ba 白色gydF4y2Ba 低频gydF4y2Ba Yinusa-NyahkoongydF4y2Ba lgydF4y2Ba 杰克gydF4y2Ba BWgydF4y2Ba 比克摩尔gydF4y2Ba 太瓦gydF4y2Ba 让女性参与一个具体的对话代理,以提供正念和生活方式的建议:一项可行性随机对照试验gydF4y2Ba 病人教育计数gydF4y2Ba 2017gydF4y2Ba 09gydF4y2Ba One hundred.gydF4y2Ba 9gydF4y2Ba 1720gydF4y2Ba 1729gydF4y2Ba 10.1016 / j.pec.2017.04.015gydF4y2Ba 28495391gydF4y2Ba s0738 - 3991 (17) 30249 - 5gydF4y2Ba PMC5559098gydF4y2Ba 哈扎维gydF4y2Ba 年代gydF4y2Ba 阿里gydF4y2Ba 米gydF4y2Ba 史密斯gydF4y2Ba TgydF4y2Ba 舒伯特gydF4y2Ba lgydF4y2Ba 霍克gydF4y2Ba 米gydF4y2Ba LISSA虚拟人和ASD青少年:初步实验概述gydF4y2Ba 2016gydF4y2Ba 智能虚拟代理国际会议gydF4y2Ba 2016gydF4y2Ba 洛杉矶gydF4y2Ba 460gydF4y2Ba 463gydF4y2Ba 10.1007 / 978 - 3 - 319 - 47665 - 0 - _55gydF4y2Ba 刘gydF4y2Ba BgydF4y2Ba SundargydF4y2Ba 党卫军gydF4y2Ba 机器应该表达同情和同理心吗?健康建议聊天机器人的实验gydF4y2Ba 网络心理行为网络gydF4y2Ba 2018gydF4y2Ba 10gydF4y2Ba 21gydF4y2Ba 10gydF4y2Ba 625gydF4y2Ba 636gydF4y2Ba 10.1089 / cyber.2018.0110gydF4y2Ba 30334655gydF4y2Ba TurunengydF4y2Ba 米gydF4y2Ba HakulinengydF4y2Ba JgydF4y2Ba 斯特尔gydF4y2Ba OgydF4y2Ba GambackgydF4y2Ba BgydF4y2Ba 汉森gydF4y2Ba PgydF4y2Ba 罗德里格斯GancedogydF4y2Ba MCgydF4y2Ba 德拉CámaragydF4y2Ba RSgydF4y2Ba 史密斯gydF4y2Ba CgydF4y2Ba 查尔顿gydF4y2Ba DgydF4y2Ba CavazzagydF4y2Ba 米gydF4y2Ba 多模式和移动会话健康和健身伙伴gydF4y2Ba 计算机语音与语言gydF4y2Ba 2011gydF4y2Ba 4gydF4y2Ba 25gydF4y2Ba 2gydF4y2Ba 192gydF4y2Ba 209gydF4y2Ba 10.1016 / j.csl.2010.04.004gydF4y2Ba 伯顿gydF4y2Ba CgydF4y2Ba Szentagotai鞑靼人gydF4y2Ba 一个gydF4y2Ba 麦金斯gydF4y2Ba BgydF4y2Ba 马西森gydF4y2Ba CgydF4y2Ba MatugydF4y2Ba 年代gydF4y2Ba 摩尔多瓦gydF4y2Ba RgydF4y2Ba MacnabgydF4y2Ba 米gydF4y2Ba 法罗gydF4y2Ba EgydF4y2Ba 大卫gydF4y2Ba DgydF4y2Ba PagliarigydF4y2Ba CgydF4y2Ba 萨拉诺布兰科gydF4y2Ba 一个gydF4y2Ba 种gydF4y2Ba 米gydF4y2Ba Help4Mood财团gydF4y2Ba Help4Mood的随机对照试验,这是一个基于实体的虚拟代理系统,用于支持抑郁症的治疗gydF4y2Ba J远程遥控gydF4y2Ba 2016gydF4y2Ba 09gydF4y2Ba 22gydF4y2Ba 6gydF4y2Ba 348gydF4y2Ba 55gydF4y2Ba 10.1177 / 1357633 x15609793gydF4y2Ba 26453910gydF4y2Ba 1357633 x15609793gydF4y2Ba SwartoutgydF4y2Ba WgydF4y2Ba ArtsteingydF4y2Ba RgydF4y2Ba ForbellgydF4y2Ba EgydF4y2Ba FoutzgydF4y2Ba 年代gydF4y2Ba 车道gydF4y2Ba HCgydF4y2Ba 兰格gydF4y2Ba BgydF4y2Ba MoriegydF4y2Ba 摩根富林明gydF4y2Ba 里索gydF4y2Ba 作为gydF4y2Ba TraumgydF4y2Ba DgydF4y2Ba 学习的虚拟人gydF4y2Ba 省里gydF4y2Ba 2013gydF4y2Ba 12gydF4y2Ba 15gydF4y2Ba 34gydF4y2Ba 4gydF4y2Ba 13gydF4y2Ba 10.1609 / aimag.v34i4.2487gydF4y2Ba 范gydF4y2Ba 一个gydF4y2Ba NtingagydF4y2Ba XgydF4y2Ba VilakazigydF4y2Ba KgydF4y2Ba 会话代理提供快速艾滋病毒咨询和检测服务的潜力gydF4y2Ba 2017gydF4y2Ba 数据科学前沿与进展国际会议gydF4y2Ba 2017gydF4y2Ba 西安gydF4y2Ba 80gydF4y2Ba 85gydF4y2Ba 10.1109 / fads.2017.8253198gydF4y2Ba WargniergydF4y2Ba PgydF4y2Ba BenvenistegydF4y2Ba 年代gydF4y2Ba JouvelotgydF4y2Ba PgydF4y2Ba ·里歌德交谈gydF4y2Ba 一个gydF4y2Ba LOUISE中交互管理支持的可用性评估,这是一个面向认知障碍老年人的基于eca的用户界面gydF4y2Ba 泰德gydF4y2Ba 2018gydF4y2Ba 11gydF4y2Ba 26gydF4y2Ba 30.gydF4y2Ba 3.gydF4y2Ba 105gydF4y2Ba 126gydF4y2Ba 10.3233 / - 180189gydF4y2Ba 康gydF4y2Ba JgydF4y2Ba 魏gydF4y2Ba lgydF4y2Ba “给我我想要的支持!”“在促进积极的用户-代理交互中,匹配会话代理的社会支持与用户的社会支持需求的效果。gydF4y2Ba 2018gydF4y2Ba 第六届人机交互国际会议gydF4y2Ba 2018gydF4y2Ba 南安普顿gydF4y2Ba 106gydF4y2Ba 113gydF4y2Ba 10.1145/3284432.3284462gydF4y2Ba OlafssongydF4y2Ba 年代gydF4y2Ba 奥利里gydF4y2Ba TgydF4y2Ba 比克摩尔gydF4y2Ba TgydF4y2Ba 强迫改变-与对话代理的对话促进行为改变的信心gydF4y2Ba 2019gydF4y2Ba 第13届EAI医疗普适计算技术国际会议gydF4y2Ba 2019gydF4y2Ba 特兰托gydF4y2Ba 31gydF4y2Ba 40gydF4y2Ba 10.1145/3329189.3329202gydF4y2Ba TielmangydF4y2Ba 毫升gydF4y2Ba NeerincxgydF4y2Ba 妈gydF4y2Ba 范MeggelengydF4y2Ba 米gydF4y2Ba 弗兰肯gydF4y2Ba 我gydF4y2Ba 边缘主义者gydF4y2Ba WgydF4y2Ba 虚拟代理应该如何呈现心理教育?语言和文本表达对坚持的影响gydF4y2Ba 科技保健gydF4y2Ba 2017gydF4y2Ba 12gydF4y2Ba 04gydF4y2Ba 25gydF4y2Ba 6gydF4y2Ba 1081gydF4y2Ba 1096gydF4y2Ba 10.3233 / thc - 170899gydF4y2Ba 28800346gydF4y2Ba THC170899gydF4y2Ba PMC5814660gydF4y2Ba FulmergydF4y2Ba RgydF4y2Ba JoeringydF4y2Ba 一个gydF4y2Ba 外邦人gydF4y2Ba BgydF4y2Ba LakerinkgydF4y2Ba lgydF4y2Ba RauwsgydF4y2Ba 米gydF4y2Ba 使用心理人工智能(Tess)缓解抑郁和焦虑症状:随机对照试验gydF4y2Ba JMIR Ment HealthgydF4y2Ba 2018gydF4y2Ba 12gydF4y2Ba 13gydF4y2Ba 5gydF4y2Ba 4gydF4y2Ba e64gydF4y2Ba 10.2196 / mental.9782gydF4y2Ba 30545815gydF4y2Ba v5i4e64gydF4y2Ba PMC6315222gydF4y2Ba Martinez-MirandagydF4y2Ba JgydF4y2Ba BresogydF4y2Ba 一个gydF4y2Ba Garcia-GomezgydF4y2Ba JgydF4y2Ba 往好的方面看:虚拟代理的认知变化模型gydF4y2Ba 2014gydF4y2Ba 智能虚拟代理国际会议gydF4y2Ba 2014gydF4y2Ba 波士顿gydF4y2Ba 285gydF4y2Ba 294gydF4y2Ba 10.1007 / 978 - 3 - 319 - 09767 - 1 - _37gydF4y2Ba 比克摩尔gydF4y2Ba TgydF4y2Ba 关系代理通过人机关系影响变化gydF4y2Ba 2003gydF4y2Ba 美国gydF4y2Ba 麻省理工学院gydF4y2Ba 1gydF4y2Ba 284gydF4y2Ba LygydF4y2Ba KHgydF4y2Ba LygydF4y2Ba 一个gydF4y2Ba 安德森gydF4y2Ba GgydF4y2Ba 促进心理健康的全自动对话代理:使用混合方法的试点随机对照试验gydF4y2Ba 互联网的干预措施gydF4y2Ba 2017gydF4y2Ba 12gydF4y2Ba 10gydF4y2Ba 39gydF4y2Ba 46gydF4y2Ba 10.1016 / j.invent.2017.10.002gydF4y2Ba Martinez-MirandagydF4y2Ba JgydF4y2Ba 马丁内斯gydF4y2Ba 一个gydF4y2Ba 拉莫斯gydF4y2Ba RgydF4y2Ba 阿基拉gydF4y2Ba HgydF4y2Ba 吉梅内斯gydF4y2Ba lgydF4y2Ba 阿里亚斯gydF4y2Ba HgydF4y2Ba 罗萨莱斯gydF4y2Ba GgydF4y2Ba 瓦伦西亚gydF4y2Ba EgydF4y2Ba 评估用户对预防和检测自杀行为的基于移动的具身对话代理的可接受性gydF4y2Ba J医学系统gydF4y2Ba 2019gydF4y2Ba 06gydF4y2Ba 25gydF4y2Ba 43gydF4y2Ba 8gydF4y2Ba 246gydF4y2Ba 10.1007 / s10916 - 019 - 1387 - 1gydF4y2Ba 31240494gydF4y2Ba 10.1007 / s10916 - 019 - 1387 - 1gydF4y2Ba 平托gydF4y2Ba 医学博士gydF4y2Ba 格林布拉特gydF4y2Ba 我gydF4y2Ba 西克曼gydF4y2Ba RLgydF4y2Ba 大米gydF4y2Ba 嗯gydF4y2Ba 托马斯。gydF4y2Ba TLgydF4y2Ba ClochesygydF4y2Ba JMgydF4y2Ba 评估eSMART-MH的关键参数:一种有前途的基于avatar的数字治疗干预以减少抑郁症状gydF4y2Ba 展望精神科护理gydF4y2Ba 2016gydF4y2Ba 07gydF4y2Ba 52gydF4y2Ba 3.gydF4y2Ba 157gydF4y2Ba 68gydF4y2Ba 10.1111 / ppc.12112gydF4y2Ba 25800698gydF4y2Ba Yokotani称gydF4y2Ba KgydF4y2Ba 高木涉gydF4y2Ba GgydF4y2Ba WakashimagydF4y2Ba KgydF4y2Ba 在采用混合方法设计的综合心理健康访谈中,虚拟代理优于临床心理学家gydF4y2Ba 计算机在人类行为中的应用gydF4y2Ba 2018gydF4y2Ba 08gydF4y2Ba 85gydF4y2Ba 6gydF4y2Ba 135gydF4y2Ba 145gydF4y2Ba 10.1016 / j.chb.2018.03.045gydF4y2Ba 2018gydF4y2Ba 吴gydF4y2Ba YgydF4y2Ba SamantgydF4y2Ba DgydF4y2Ba 施贵宝制药gydF4y2Ba KgydF4y2Ba ChaetgydF4y2Ba 一个gydF4y2Ba MorshedigydF4y2Ba BgydF4y2Ba 巴恩斯gydF4y2Ba lgydF4y2Ba 面向拉丁农场工人的互动式癌症教育技术设计gydF4y2Ba 2014gydF4y2Ba 04gydF4y2Ba 2014年IEEE软件可靠性工程研讨会gydF4y2Ba 2014gydF4y2Ba 华盛顿gydF4y2Ba 10.1109 / SIEDS.2014.6829908gydF4y2Ba JadejagydF4y2Ba 米gydF4y2Ba 杂文集gydF4y2Ba NgydF4y2Ba 评估对话式AI的视角gydF4y2Ba arXiv预印本gydF4y2Ba 2017gydF4y2Ba 1gydF4y2Ba 6gydF4y2Ba 班戈gydF4y2Ba 一个gydF4y2Ba KortumgydF4y2Ba PTgydF4y2Ba 米勒gydF4y2Ba JTgydF4y2Ba 系统可用性量表的实证评估gydF4y2Ba 国际人机交互杂志gydF4y2Ba 2008gydF4y2Ba 07gydF4y2Ba 30.gydF4y2Ba 24gydF4y2Ba 6gydF4y2Ba 574gydF4y2Ba 594gydF4y2Ba 10.1080 / 10447310802205776gydF4y2Ba 布鲁克gydF4y2Ba JgydF4y2Ba 约旦gydF4y2Ba PgydF4y2Ba 托马斯。gydF4y2Ba BgydF4y2Ba 麦克勒兰德gydF4y2Ba 我gydF4y2Ba WeerdmeestergydF4y2Ba BgydF4y2Ba 一个快速而肮脏的可用性量表gydF4y2Ba 工业可用性评估gydF4y2Ba 1996gydF4y2Ba 伦敦gydF4y2Ba CRC的新闻gydF4y2Ba 4gydF4y2Ba 7gydF4y2Ba 福尔摩斯gydF4y2Ba 年代gydF4y2Ba 学习gydF4y2Ba 一个gydF4y2Ba 债券gydF4y2Ba RgydF4y2Ba 郑gydF4y2Ba HgydF4y2Ba 科茨gydF4y2Ba VgydF4y2Ba McTeargydF4y2Ba 米gydF4y2Ba 我们能用传统的方法来评估对话式用户界面吗?gydF4y2Ba 2019gydF4y2Ba 第31届欧洲认知工效学会议gydF4y2Ba 2019gydF4y2Ba 贝尔法斯特gydF4y2Ba 医疗保健聊天机器人的可用性测试gydF4y2Ba 207gydF4y2Ba 2014gydF4y2Ba 10.1145/3335082.3335094gydF4y2Ba ShumgydF4y2Ba HgydF4y2Ba 他gydF4y2Ba XgydF4y2Ba 李gydF4y2Ba DgydF4y2Ba 从Eliza到小冰:社交聊天机器人的挑战和机遇gydF4y2Ba 前沿技术电子工程gydF4y2Ba 2018gydF4y2Ba 1gydF4y2Ba 8gydF4y2Ba 19gydF4y2Ba 1gydF4y2Ba 10gydF4y2Ba 26gydF4y2Ba 10.1631 / fitee.1700826gydF4y2Ba LaranjogydF4y2Ba lgydF4y2Ba 邓恩gydF4y2Ba AG)gydF4y2Ba 通gydF4y2Ba 霍奇金淋巴瘤gydF4y2Ba KocaballigydF4y2Ba ABgydF4y2Ba 程ydF4y2Ba JgydF4y2Ba 巴希尔gydF4y2Ba RgydF4y2Ba SuriangydF4y2Ba DgydF4y2Ba 加利西亚语gydF4y2Ba BgydF4y2Ba MagrabigydF4y2Ba FgydF4y2Ba 刘gydF4y2Ba 投赞成票者gydF4y2Ba CoieragydF4y2Ba EgydF4y2Ba 医疗保健中的对话代理:系统回顾gydF4y2Ba 美国医学信息协会gydF4y2Ba 2018gydF4y2Ba 09gydF4y2Ba 01gydF4y2Ba 25gydF4y2Ba 9gydF4y2Ba 1248gydF4y2Ba 1258gydF4y2Ba 10.1093 /地点/ ocy072gydF4y2Ba 30010941gydF4y2Ba 5052181gydF4y2Ba PMC6118869gydF4y2Ba Abd-alrazaqgydF4y2Ba AAgydF4y2Ba AlajlanigydF4y2Ba 米gydF4y2Ba AlalwangydF4y2Ba AAgydF4y2Ba 比尤伊克gydF4y2Ba BMgydF4y2Ba 加德纳gydF4y2Ba PgydF4y2Ba HousehgydF4y2Ba 米gydF4y2Ba 心理健康领域聊天机器人功能概述:范围综述gydF4y2Ba 国际医学信息学杂志gydF4y2Ba 2019gydF4y2Ba 12gydF4y2Ba 132gydF4y2Ba 103978gydF4y2Ba 10.1016 / j.ijmedinf.2019.103978gydF4y2Ba Abd-alrazaqgydF4y2Ba 一个gydF4y2Ba RababehgydF4y2Ba 一个gydF4y2Ba AlajlanigydF4y2Ba 米gydF4y2Ba 比尤伊克gydF4y2Ba BgydF4y2Ba HousehgydF4y2Ba 米gydF4y2Ba 使用聊天机器人改善心理健康的有效性和安全性:系统回顾和元分析gydF4y2Ba 医学互联网研究杂志。即将到来的gydF4y2Ba 2020gydF4y2Ba 2020gydF4y2Ba (即将出版)gydF4y2Ba 10.2196/16021gydF4y2Ba VaidyamgydF4y2Ba 一个gydF4y2Ba WisniewskigydF4y2Ba HgydF4y2Ba HalamkagydF4y2Ba JDgydF4y2Ba KashavangydF4y2Ba 女士gydF4y2Ba TorousgydF4y2Ba 简森-巴顿gydF4y2Ba 心理健康中的聊天机器人和会话代理:精神病学领域的回顾gydF4y2Ba 《精神病学》gydF4y2Ba 2019gydF4y2Ba 07gydF4y2Ba 64gydF4y2Ba 7gydF4y2Ba 456gydF4y2Ba 464gydF4y2Ba 10.1177 / 0706743719828977gydF4y2Ba 30897957gydF4y2Ba ProvoostgydF4y2Ba 年代gydF4y2Ba 刘gydF4y2Ba 嗯gydF4y2Ba RuwaardgydF4y2Ba JgydF4y2Ba 成熟gydF4y2Ba HgydF4y2Ba 临床心理学中的具体对话代理:范围综述gydF4y2Ba J医疗互联网服务gydF4y2Ba 2017gydF4y2Ba 05gydF4y2Ba 09gydF4y2Ba 19gydF4y2Ba 5gydF4y2Ba e151gydF4y2Ba 10.2196 / jmir.6553gydF4y2Ba 28487267gydF4y2Ba v19i5e151gydF4y2Ba PMC5442350gydF4y2Ba
Baidu
map