发表在6卷,9号(2022):9月

本文的预印本(早期版本)是可用的https://preprints.www.mybigtv.com/preprint/36003,第一次出版
优化的可接受性、依从性和包容性的COVID雷达监视应用程序:定性研究使用焦点小组,主题内容分析和可用性测试

优化的可接受性、依从性和包容性的COVID雷达监视应用程序:定性研究使用焦点小组,主题内容分析和可用性测试

优化的可接受性、依从性和包容性的COVID雷达监视应用程序:定性研究使用焦点小组,主题内容分析和可用性测试

原始论文

1卫生行政部门和初级保健,莱顿大学医学中心,荷兰莱顿

2国家电子健康生活实验室,荷兰莱顿

通讯作者:

Jiska J Aardoom,博士学位

卫生行政部门和初级保健

莱顿大学医学中心

Hippocratespad 21

莱顿2300 RC

荷兰

电话:31 071 526 843

电子邮件:J.J.Aardoom@lumc.nl


背景:COVID雷达应用程序被开发成以人群为基础的监测仪器识别高危人群和地区应对COVID-19大流行。850万年>应用程序拥有完成问卷,> 280000用户。虽然COVID群体监视雷达的应用是一个有效的工具,用户参与度高COVID雷达应用的成功是至关重要的在维护的有效性。

摘要目的:本研究旨在确定COVID雷达应用的优化目标,以改善其可接受性,依从性和包容性。

方法:COVID雷达应用的主要成分是一种自我报告问卷,评估COVID-19症状和社会距离的行为。总共3进行了定性substudies。首先,3种焦点小组访谈最终用户(N = 14)的应用进行了收集信息的用户体验。输出是转录和主题编码使用该框架的方法。第二,一个类似的定性进行了专题分析1080终端用户的电子邮件。第三,可用性测试是在一对一的进行会话有4个人素养较低水平。

结果:3 substudies确定优化目标的设计和内容。substudy 1的结果显示,参与者通常积极评估程序。他们报道了应用程序用户友好的和感到满意它的设计和功能。使用应用程序参与者的主要动机是为科学作出贡献。参与者建议添加激励工具来刺激用户参与度。更大的全国性宣传活动的应用程序被认为是可能有助于增加用户。应用更新通知用户有关项目及其输出动力用户继续使用应用。在自我报告的问卷反馈,源于substudies 1和2,主要关注的内容和措辞的问题。此外,部分应用程序允许用户比较他们的症状和行为的同龄人被发现不佳,因为困难解释应用程序中提供的数据。最后,substudy 3的输出导致建议主要相关文本的简化使它更容易的和可理解的个人素养较低水平。

结论:应用程序使用的便利性,使个人调整的应用经验,并考虑激励因素持续应用程序使用(即利他主义和集体主义)是至关重要的采购和维护人口COVID雷达应用。进一步的活跃用户,似乎有一种需要增加公共卫生工具的可访问性对个人素养较低水平。这些结果可以用来改善这和未来公共卫生应用和提高他们的用户数量和用户参与的代表性,最终增加工具的有效性。

JMIR形式Res 2022; 6 (9): e36003

doi: 10.2196/36003

关键字



背景

2019年12月以来,世界已经与SARS-CoV-2 (COVID-19)。在荷兰,第一个病例在2020年2月被确认了,到目前为止,在> 260万例确诊病例和19000例死亡(1]。追踪和跟踪策略和检疫措施来限制社会联系和社会距离被广泛用于防止病毒的传播(2]。然而,延迟症状的出现和确认测试结果之间爆发期间增加交货期。连续以人群为基础的监测COVID-19-related症状和社会距离的行为可能援助COVID-19估计风险的情况下在地区层面上,允许地方政府干预在早期阶段(3]。

大流行以来,实现了移动应用等各种目标的风险评估和决策以及自我管理和自我监控的症状(4]。Symptom-monitoring应用基于自我报告显示有前景的结果的预测当地COVID-19扩散症状跟踪在英国和美国使用(5,6]。Menni et al (5)发现,预测模型基于app-based症状追踪可以预测积极COVID-19测试的敏感性为65%,特异性为78% (5]。其他研究已经表明,全民自我报告收集的数据通过一个移动应用程序可以识别COVID-19发病率最高的75%的地区根据政府测试数据(6]。最后,最近的一项研究表明,纵向自我报告健康数据,行为,和人口统计资料,收集与网络和移动应用程序,可以充分利用在构建预测模型来识别潜在的积极COVID-19情况下(7]。上述文献强调了自我报告数据的效用以人群为基础的COVID-19 COVID-19热点跟踪和后续的预测,从而最终帮助应对COVID-19大流行。

在荷兰,一个分享服务监测应用,COVID雷达应用,开发。应用程序的目的是预测未来地形COVID热点的帮助下自我报告COVID症状,使地方或国家政府干预的可能性,例如,由当地通知公众或实施限制。应用使频繁和匿名自愿自我报告COVID-19-related症状和行为(用户只被要求为他们的邮编,年龄,性别,和职业)。应用程序开发在第一次COVID-19波在荷兰在2020年的春天。等功能,应用程序包含一个简短的监测调查问卷(≥20个问题)要求用户自我报告COVID-19-related症状,社会距离的行为,COVID-19状态和疫苗接种的地位。应用另外提供用户反馈报告社会距离的行为(例如,1.5米内遇到的人数和时间在房子外面)和症状,使他们能够比较这些全国平均值,以及在其特定的地理区域。自启动应用2020年4月,它拥有850万>完成问卷,> 280000独立用户,其中> 13000完成了问卷平均一周至少两次。COVID雷达应用可以被认为是一个公民科学项目,它涉及公众的科学过程,在这种情况下,收集大量纵向的症状和在荷兰(社会距离数据8]。

先前的研究已经表明,COVID雷达应用程序是一个有用的和群体的有效工具监测和预测潜在的本地COVID-19热点[3]。更具体地说,自我积极的测试结果报告通过应用紧密匹配的重要政府部门情况。此外,还有清晰的自我COVID-19症状之间的联系和积极的测试结果。对行为的措施,明确协会发现自我积极的测试结果和高于平均水平的危险行为之间的社会距离(例如,有更多的游客在家里或在1.5米)有更多的人在一个测试。重要的是,确定症状之间的联系,社会距离的行为,和测试结果最明显的地区的用户参与度高。因此,用户参与度高在不同地区的国家似乎至关重要的成功使用自我报告的症状和行为预测模型。公民在以人群为基础的刺激和提高用户参与度的监视应用程序如COVID雷达仍然具有挑战性。

荷兰卫生组织研发资助COVID雷达项目的多学科团队旨在开发一个移动后,基于行为的早期预警系统COVID-19在荷兰的第一波。在这个项目的方法结合独特的实时空间总结每4位邮政编码区域的症状和高危行为人群监测数据COVID雷达应用的莱顿大学医学中心(LUMC)与聚合历史移动移动通信所提供的信息数据。这个项目的目标之一是优化COVID雷达应用和丰富人口监测综合症和行为数据。这种优化的目标COVID雷达应用和调查的最终提高可接受性,坚持,和包容的应用和未来的学习经验提高全民健康相关的应用程序。这可以随后进一步支持国家COVID雷达的升级和使用,以及提高其用户群体的代表性。此外,随后这样的目标可以用作输入设计国家监测时自我报告数据收集应用程序。

目标

本研究的主要目的是确定COVID雷达应用的优化目标,最终提高可接受性,坚持,和包容的应用。我们旨在确定优化目标进行3定性substudies:(1)收集和分析通过半结构式深入用户体验信息焦点小组访谈的终端用户COVID雷达应用,(2)分析所有收到最终用户的电子邮件发送到COVID雷达问世以来项目团队的应用,和(3)审查由语言专家和可用性测试的COVID雷达应用低教育水平的人。


设计

所有3 substudies定性研究调查。第一个substudy由3种焦点小组访谈COVID雷达终端用户。第二个substudy由定性分析的所有终端用户发送的邮件COVID雷达项目团队。第三substudy涉及专家审查和个人与个人素养较低的可用性测试会话水平。更多细节的方法可以找到这些substudies如下。

COVID雷达的应用

COVID雷达应用程序是免费为iOS和Android系统,可以从苹果应用商店和谷歌下载玩店在4月2日之间,2020年和2022年2月28日。上映后,一个简短的宣传活动。首次用户被要求注册通过提供信息(1)他们的性别(男、女、其他或未指定),(2)他们的年龄(从0到80,10年的间隔≥80类别),(3)他们的职业(教育、医疗、餐饮行业,或其他的职业风险高的人接触在1.5米),和(4)4位数的邮政编码。

该应用程序由4部分组成。第一部分包含了自我报告监测问卷。介绍了调查问卷的一个屏幕快照图1。调查问卷是动态的,也就是说,问题的数量和内容可以根据需要更新基于新的相关冠状病毒的监测方面的见解。例如,疫苗接种问题状态尽快添加荷兰疫苗接种计划开始。最终问卷共包含23个问题。电流的完整版问卷提出了多媒体附录1。共有11个问题评估COVID-19症状(如咳嗽、发烧和喉咙痛),评估社会距离和8个问题行为,包括其中,人类接触的数量在1.5米,是否一直在接触病人COVID-19感染在过去的14天,有多少游客收到了在特定的一天,参与者是否阳性(是或否),参与者是否测试在过去的2周(不,没有测试;一直tested-result是我没有冠状病毒;已经测试,结果是,我确实有冠状病毒),和一个关于COVID疫苗的问题状态。用户每隔一天收到推送消息提醒他们填写调查问卷,无论用户是否已经这么做了。

第二部分COVID雷达应用的更新部分。这部分是用来通知用户自我报告问卷的变化或通知他们对近期COVID雷达数据的分析结果。

第三部分包含一个常见问题(faq)部分,用户可以找到无数的信息主题相关信息的应用程序(如应用程序的目标),数据保护(例如,数据收集,以及为什么数据会保存一段5年?),联系信息,并说明如何完成问卷(例如,当有哮喘症状?如何报告)。

第四个也是最后一个部分是雷达的部分,在用户所报告的症状和社会距离,反馈可以观察到的行为。更具体地说,软件用户可以比较他们的自我报告的社会距离的行为(例如,1.5米)内的人数跟和症状的其他用户在当地地区以及国家的应用程序用户作为一个整体。反馈关于社会距离的行为提供了使用滑动条,颜色从绿色棕色,绿色代表安全行为和红色代表相对有风险的的行为。提供了一个屏幕快照图2图3显示了每个地理区域意味着症状患病率,归类为布朗(许多人症状),绿色(很少人症状),和灰色(参与者充分衡量流行不足)。

图1所示。监控部分的截图,展示自我报告监测问卷调查的一部分。
把这个图
图2。雷达的屏幕截图部分,每个地理区域显示地图的意思是症状,以及滑块提供反馈在症状的患病率与其他用户。
把这个图
图3。雷达的屏幕截图部分,对地图呈现意味着社会距离的行为/地理区域,以及滑块提供反馈社会距离相比与其他用户的行为。
把这个图

与最终用户Substudy 1:焦点小组访谈

过程

COVID雷达应用用户通知即将到来的焦点小组,并邀请参与通过更新的更新部分应用。邀请包含一个简短的总结研究的目标和相应的程序。参加其中的一个焦点小组,一个人必须能够阅读、说话,理解荷兰。参与者可以显示他们的兴趣参与研究小组通过发送电子邮件。一群50潜在参与者中随机选择的反应,随后被要求提供他们的可用性为即将到来的焦点小组。总共有3个焦点小组计划,以适应不同的时间表。因为可能的技术问题,进行了焦点小组比离线焦点小组,与较小的团体所推荐的先前的研究[9,10]。总共5可用为每个焦点小组参与者被随机选取的。

焦点小组将前两个星期,参与者通过电子邮件收到一个信息的信包含所有研究和相应的焦点小组程序细节。电子邮件还包含一个知情同意的形式。个人被要求完成数字化形式或手动(即打印、签署和扫描)和表格完成后,研究人员通过电子邮件。参与者收到了€20(24美元)礼品卡为他们参与面试。

焦点小组访谈

半结构式访谈协议是作为开发指南相关主题的讨论焦点小组访谈。面试协议由开放式问题,旨在收集参与者的经验和意见关于7主题:(1)应用程序的一般观点,(2)的建议提高应用,(3)自我报告监测问卷反馈,(4)反馈更新部分,(5)反馈faq部分,在雷达截面(6)反馈,推送通知和(7)反馈。

总共3焦点小组在2021年5月进行。焦点小组访谈都是基于网络的,通过放大(变焦视频通信)音频被记录。面试被BS主持。国民健康保险制度和环流的存在可能是备份版主和支持的技术问题。每个焦点小组的持续时间约为60分钟。

录音被转录。参与者的名字替换为参与者数量保持匿名。随后,成绩单是主题编码使用框架方法(11]。框架是一个定性内容分析方法。这是用来确定共性和差异在定性数据探索数据的一致性,专注于寻找每个主题解释结论。框架方法在不同阶段工作:(1)转录,(2)熟悉成绩单,(3)编码,(4)开发一个分析框架,应用分析框架(5),(6)图表数据框架矩阵,和(7)解释数据。在这个过程中,有可能去不同阶段之间的来回。这种动态的方法使添加新代码分析,从而创建一个机会应对意想不到的发现和广泛的输入主题。这种方法通常用于分析半结构式访谈数据。所确定的主题是(1)应用程序的一般观点,(2)使用的动机,(3)应用的宣传和扩大用户数量,(4)自我报告监测问卷,(5)内更新,(6)faq、雷达截面(7)、(8)推送通知。编码是由BS和检查编码的可靠性通过JS检查随机抽样记录。使用阿特拉斯进行编码。ti软件(版本7.5.18)。 Data saturation was reached after conducting 3 focus group interviews.

Substudy 2:邮箱分析

COVID雷达团队提供应用程序用户发送反馈的可能性一般的电子邮件地址。这个邮件地址是发表在faq部分联系信息。目标是使研究小组随后优化应用程序或尽快处理技术错误。总共收到的1080封电子邮件COVID雷达团队2020年5月到2021年6月被导出到一个文本文档,然后上传到阿特拉斯。ti软件(版本7.5.18)。substudy 1的码书设计是用于主题编码的邮件反馈。

Substudy 3:审查由语言专家和可用性测试在个人素养较低水平

为了评估COVID雷达应用的工具为个人素养较低水平,两种类型的活动是由灯塔:荷兰中心的专业健康差异。第一个活动是自我报告的专家评估监测问卷2专家从灯塔。所有的文本了,考虑到语言需要满足语言水平A2或B1根据欧洲共同的参考框架语言(12]。他们还建议调整文本根据检查表的访问信息。清单包含相关信息的相关信息的可访问性,例如,布局(例如,确保有足够的文本和背景颜色对比),剂量的信息(例如,声明初最重要的信息和重复),措辞和可读性的文本(例如,避免或解释困难的技术术语或医学术语)。专家评估结果的基础上,研究人员更新自我报告的措辞问题监测问卷。

第二个活动是4个人的可用性测试识字率较低水平。在一对一的网络环境中,4参与者加入一个小时可用性测试专家会见来自灯塔。在这个可用性测试中,参与者被要求执行作业检查导航是否简单的和逻辑。他们还要求大声朗读课文,这样显然哪些单词或句子难以阅读。此外,参与者被要求解释经文的意思在自己的文字里。最后,参与者被要求反馈整个可用性测试过程通过询问他们的替代品或可能解决遇到的困难。可用性测试的结果进行了总结和提出的涉及人员灯塔。

伦理批准

Substudies 1和2被宣布不落在荷兰医学研究的范围涉及人类受试者的医学伦理委员会行动LUMC并获得相应的证书没有异议。Substudy 3被第三方认证和执行组织(灯塔)。所有的志愿者在这些研究中签署知情同意表格之前他们的参与。


概述

用于substudies 1和2的码书开发和提出了表1。8个主题是(1)用户友好,(2)使用的动机,(3)宣传和扩大用户群体,(4)监测问卷,(5)内更新,(6)faq、雷达截面(7)、(8)推送通知。

表1。用于编码的码书的成绩单焦点小组(substudy 1)和电子邮件反馈(substudy 2)。
主题和代码 描述 例子
主题1:将军的意见的应用程序

用户友好性 评论相关的用户友好的应用程序;例如,易于使用的应用程序和浏览应用程序
  • “我觉得很踏实,简单,容易使用”
  • “这是一个愉快的使用应用程序,但它确实非常的文字。没有使用符号,所以主要知识水平高的人。”

设计 评论相关的设计应用,如颜色和布局
  • “我只是想知道,但并不是所有的颜色可能是手机容易区分,因为经常使用颜色深蓝色,浅蓝色,灰色。在许多手机不容易区分。”
主题2:动力使用 评论相关参与者的动机和使用应用程序的理由
  • “我开始使用COVID雷达来帮助你了解…”
  • “这不仅是一个应用程序相关的领域的研究还与自己有关。您还可以使用它来监控自己的行为和环境的行为。所以它也对自己举起一面镜子。”
主题3:应用的宣传和扩大用户群体 评论与增加应用程序的用户和支持应用程序的民族意识
  • “几乎所有人(指焦点小组参与者)的连接与莱顿或莱顿大学医学中心。我住在莱顿和唯一的报纸我读一些关于这个应用程序是一个当地莱顿报纸,所以更多的国家宣传可能说服其他人们开始使用你的应用。”
主题4:自我监测问卷

内容 评论的内容相关的问题,比如语言问题,可理解性,建议额外的问题,和其他相关建议改进自我报告监测问卷
  • “很难估计有多少人在五米,当你在一个市场或超市。”
  • “我认为这个问题是有多少小时你昨天出了房子。当然很明显。但是解释说,算作是离开家的度假胜地。嗯,我们花了一个星期的时间在一所房子前一段时间……我发现有点奇怪,我的房子,整整一个星期,一天24小时。我不认为这是有意义的。”

长度和持续时间 相关评论时间填写问卷或大约的数量问题
  • ”,打动我的地方在于,越来越多的问题被添加,我明白了,你想知道更多关于疫苗接种和一切,但是列表很长。”

额外的信息 评论使用相关的附加信息的图标或细化的问题以及它的内容
  • “是的一开始我点击图标一个阅读其内容,你知道的。因为有一次我想知道‘是的,怎么样?”:我需要计算在花园外的随着时间的房子吗?嗯,似乎不这样。”

完成的频率 评论与填写问卷的频率约在何时何地参与者完成了问卷调查
  • “通常,我填补它在晚上当我在沙发上。通常我认为:雷达的哦。”
  • “每一天!我百分之一百确定。这几乎是强迫性的东西,我觉得我需要完成它,我不能忘记。”
主题5:应用内更新

频率 评论相关的频率或时间更新
  • “我认为这些更新都是伟大的,就像参与者X刚才说什么;它可以经常每周。”

效果 评论相关的经验影响应用程序更新
  • “他们主要激励我。然后我想,哦,很高兴听到。我也认为,因为我一直在使用这个应用程序现在一年多来,然后我也看看我做了什么。因此我总是阅读更新。”

内容 相关评论的内容更新
  • “一般情况下,我发现信息的更新,最好有一些更多关于这个话题的背景信息。”
主题六:常见问题一个

原因(s)咨询 相关评论()的原因(s)为什么用户咨询常见问题部分和改进的建议
  • “是的,当然我看着FAQ部分。特别是在开始之前我开始填写调查问卷。看看这个程序背后的是谁与我的数据和他们在做什么。”

内容 评论相关常见问题部分的内容,如清晰的答案和主题的完整性
  • “这部分是明确的。是的,答案是。”
主题7:雷达截面

内容 评论有关雷达截面的内容(例如,地图和滑块)及其效果
  • “我认为你有那些滑动条关于行为;多少个小时你都在外面。我花了很长时间才意识到有三个滑块,而不是两个…”

访问的频率 相关评论用户需要多久看雷达截面
  • “是的,我每天都看它。或每天,每次填入列表,每天不一定。”
主题8:推送通知

建议改进 评论与建议改善推送通知的方法,例如关于时间和频率
  • “个性化的消息,对我来说,这是我的清晨功课的一部分。当我忘记填写调查问卷,我宁愿听早上(提醒)因为它发生在9点钟之前或不会发生。”
  • “我认为提醒,是否通过一个声音或一个弹出,肯定有帮助。我已经注意到自己…是的,如果我能在自己的时间里设一个提醒小睡函数,那么我认为完成分数会高得多。”

效果 相关评论(nonintelligent)推送消息的影响
  • “好吧,我不得不说,我很高兴与提醒。因为,我人没有完成问卷通常在一天的特定部分,不幸的是。我已经注意到,它帮助当我收到这样的消息,就像一个推消息。”
  • “我关掉了,因为我认为这是非常意味着我完成它(调查问卷),还收到了提醒。”

一个常见问题:常见问题。

Substudy 1:焦点小组访谈

概述

总之,2焦点小组由5参与者和参与者的焦点小组由4参与者因为无法参加面试由于个人情况。14的参与者,12(86%)是女性。其他人口统计信息没有获得保护参与者的匿名性。substudy 1总结的结果表2。在文本中,简要的解释结果,根据8确定主题(表1)。

表2。焦点小组的结果中总结优势和潜在的改进。
主题和subthemes 的优势 潜在的改进
主题1:将军的意见的应用程序

用户友好性
  • 简单而直观的使用
  • 以前的答案被保存为默认的答案
  • 对于一些用户来说,应用程序有点过于简单,使枯燥的应用体验

设计
  • 基本的和简单的
  • 满意的功能
  • 创建一个黑暗的模式选项
  • 使用更多的符号和文本
  • 更多的使用有效的色彩对比
主题2:动力使用
  • 使应用程序用户帮助推进科学和数据收集
  • 增加社会距离的意识行为
  • 接触到越来越多的研究目标和COVID雷达应用的更广泛的目标
  • 添加激励工具等游戏元素
主题3:应用的宣传和扩大用户群体
  • 高的公民参与到研究机构及其直接或间接连接城市
  • 更多的努力而言,国家宣传活动,以扩大全国用户
  • 更多的努力的宣传活动特别是在地理区域用户参与度较低
主题4:自我监测问卷

内容
  • 大多数问题都视为重要的和逻辑的用户
  • 短语包括他们回答一些问题类别以更加明确和统一的方式,减少歧义
  • 调整或删除很难回答问题或问题,不能总是以可靠的方式回答

长度和持续时间
  • 不到一分钟的时间支持定期完成
  • 创建应用程序用户的机会来缩短问卷通过引入更多的逻辑(ie,跳过问题,不适用)

额外的信息
  • 整体清晰
  • 详细说明所提供的解释性信息增加的理解问题,从而提供更多的支持,选择正确的答案

完成的频率
  • 大多数用户定期完成了问卷调查
  • 个性化推送通知来激励完成问卷,帮助创建的习惯定期填写调查问卷
  • 也指潜在改进主题2(使用)的动机以及主题5(应用程序更新)
主题5:应用内更新

频率
  • 没有一个
  • 更频繁的更新

效果
  • 鼓励和激励来完成,继续完成问卷
  • 没有一个

内容
  • 有趣的
  • 增加了人物的可理解性

主题六:常见questions-content
  • 清晰和全面的
  • 没有一个
主题7:雷达截面

内容
  • 部分提供了洞察力与同行相比,症状和行为
  • 增加可理解性的数据通过增加其设计和详细说明,更好地解释相应的功能。

访问的频率
  • 没有一个
  • 使雷达截面更对用户可见。
主题8:推送通知
  • 有价值的;有助于更频繁地完成问卷调查
  • 在继续使用自动通知的情况下,禁用通知当问卷已经完成
  • 使个性化的频率和时间的通知
应用程序的一般看法

一般来说,参与者积极评估COVID雷达的应用。他们发现用户友好的和直观的应用程序。大部分的参与者满意的设计和功能应用,以其简单性经常被列为其优势之一:

我发现它非常脚踏实地。简单和容易使用。对我来说这个应用是响亮而清晰,是的,我不认为它会更容易。

另一方面,一些参与者发现应用程序是一个太基本和建议的简单应用程序没有挑战他们足够:

如何达成不同的或更大的目标受众?我认为你需要解决一些应用程序本身。我将说一些丑陋,但是应用程序看起来肤浅。

总的来说,参与者很感激他们最近的答案关于COVID-19症状是保存为默认的答案,从而节省时间下次他们填写调查问卷。

使用的动机

参与者的主要动机使用应用程序可以概括为他们渴望进步的科学。参与者的动机为数据收集,以帮助科学家预测未来COVID-19冲突:

我很满意这个应用程序,因为它给我的感觉我奉献。当然,这是一个伟大的感觉,尤其是在这个时候,你经常感到无助。

此外,一些参与者提到时间反思社会距离的行为增加了他们的意识。例如,当报告来的人数在1.5米或游客的数量在收到家里的信,如果这些值是相对较高的,参与者经历一种不适的报道,促使他们反思他们的行为:

然后你想,也许下次我可以不同。它没有让我自我报告它比它实际上是不同的,尽管我认为不时“也许我应该报告更少的人。“但它使我每天在我的脚趾头上了,所以在这个意义上我肯定为你做研究人员/科学,但我还做它为我自己和我自己的意识。

讨论动力继续使用应用程序时,几位与会者讨论整合激励工具应用的潜力提高依从性。具体建议包括反复接触COVID背后的研究目标和更广泛的目标雷达;例如,通过应用内更新。其他建议相关的潜在的严重的游戏元素,如使参与者能够收集数字徽章基于他们完成了问卷的次数:

你知道,但你也可以使用徽章。我有另一个应用程序中获得徽章5天、10天,50天。但是你必须做出某种仪表板中可用COVID雷达可以看看已经完成了问卷调查。我知道我很出于这样的条纹。
应用的宣传和扩大用户群体

大多数参与者的焦点小组意识到应用程序通过直接或间接的个人连接LUMC或莱顿城。更努力的国家宣传活动使用社交媒体提出了达到更多的公民。另一个建议是广告应用在地理区域相对较低的用户参与使用小册子或当地媒体。

自我报告监测问卷

大多数有关自我报告监测问卷反馈的内容和措辞的问题。几位与会者指出,一些应用程序用户离开房间解释的问题,这可能会导致偏见的答案。更具体地说,这个问题“昨天,多少人在5米,在房子外面吗?“收到了广泛的反馈。大多数参与者认为这个问题挑战,甚至难以回答,因为他们感觉不能够准确地估计这个数字:

我几乎每天都骑我的自行车。有多少人你遇到在5米吗?街道是5米,所以每次我骑我的自行车我几乎确信我可以填写,50人是小于5米给我。

一个问题“你完全接种COVID-19吗?”也引起了广泛的反馈。一些参与者想知道为什么只有他们是否感兴趣完全接种疫苗,而不是允许用户表示他们已经收到多少次疫苗接种。

关于问题附带的额外信息,提供的信息并不总是澄清问题或疑虑的参与者各自的问题。例如,关于某些位置是否存在诸多问题,比如工作办公室,商店,超市,应该归类为公共场所。

关于问卷的长度,一些参与者发现它太久,虽然大多数参与者报告,填写调查问卷花了不到一分钟。同理,一些参与者在他们的动机重复回答相同的问题。一个建议是启用的可能性表明参与者是否经历COVID症状的变化,因为这些是相对稳定相比,行为的措施(例如,一个不每隔一天有一个喉咙痛,而来的人数小于5米可以白天波动)。更具体地说,参与者建议创建一个缩短版本的问卷的症状投诉COVID-19被合并成一个问题(例如,“你经历任何COVID症状吗?”),如果积极回答,导致下拉菜单中可以显示特定的症状出现。

大多数参与者报告完成定期监测问卷,与一些报道每天这样做。大多数参与者报告了填写问卷的习惯在每天一组时间:

它需要变得就像刷牙一样。

参与者填写的问卷少似乎定期报告完成的时间一致性,努力创建一个习惯。

应用程序更新

大多数参与者阅读就注意到应用程序的更新通知,而另一些没有收到或注意到任何通知和检查本节偶尔更新。总的来说,应用的推送消息更新进行评估的价值。

参与者被热心的内容更新和描述的更新是非常有趣的。此外,参与者阐述了如何将这些更新促使他们继续填写问卷:

对我来说,最有趣的更新应用程序的一部分,因为它是某种奖励完成调查问卷。

然而,许多参与者提到使用的数据更新并不总是足够详细地综合或解释。例如,混乱的配色方案是一个来源,一些参与者不能完全理解这些数据。它也提到轴标签有时缺乏或不完整。几乎所有的参与者都表示,他们更喜欢更频繁的更新。

常见问题

大约一半的参与者报告有访问的faq部分应用至少一次。咨询常见问题部分原因范围从感兴趣的研究和相应的分析与收集到的数据和想知道更多关于隐私相关问题的好奇心有多少活跃应用用户。一般来说,参与者认为本节中的信息是清晰和易于理解。

雷达截面

几个参与者,雷达的应用程序提供了一个方便的方法来比较他们的症状和行为与他们同行。他们阐述了有时会调整他们的行为基于同行对比数据:

我比较自己和别人在我的地区。我对社会压力敏感,所以有时对我来说这是一个理由隐瞒自己在周末。

然而,受到最多关注的雷达截面的确定优化目标。两个参与者从来没有注意到雷达。视觉效果(即数据)的雷达截面是另一个经常被提到的话题潜在的改进。缺乏对比和nonmatching传奇色彩,被称为阻碍理解的数据应用程序的用户。

推送通知

参与者没有完成问卷日报报道,推送消息促使他们更频繁地完成调查问卷:

我很高兴…提醒提醒的肯定鼓励我填写调查问卷。

相比之下,参与者完成了问卷日报报道,推送消息创建的混乱。的消息使他们的问题是否已经完成了问卷调查。他们还报道了提醒的源刺激当他们一定已经完成了问卷调查。潜在的参与者提供的解决方案是创建个性化推送通知的可能性,使他们能够被设置在一个用户定义的时间和频率,从而帮助他们创建一个例程。

Substudy 2:邮箱分析

共1080封电子邮件进行了分析;大约三分之一的邮件编码为无关紧要,因为他们包含重复的邮件,垃圾邮件、邮件广告,或从COVID雷达更新Facebook或Instagram账户。大多数电子邮件包含应用程序用户提问如何解释或回答一个特定问题的自我报告问卷(表1主题4:内容)。监控问题有多少人是在5米某一天导致广泛的许多用户的反馈,表明他们认为这是不合理的准确估计这个值。此外,用户询问几个问题联系数为5米内“人”:

在上班的路上我经过很多人,5米之内我来。我应该在雷达报告这些短暂的接触?

另一个监控的问题,收到了广泛的疑问反馈开门的游客一个收到了在某一天在家里。用户经常质疑他们需要计算他们的孙辈年龄< 12年游客:

我们照顾孙子。当然,他们接近我比1.5米,但是我们明白,通过儿童感染的风险是最小的。我们需要报告我们的子孙比1.5米的人越走越近吗?

几个电子邮件包含额外的建议纳入监测问卷的问题。例如,许多人建议添加一个问题状态一旦接种疫苗计划从2021年1月开始。另一个常见的反馈是,自我报告问卷的答案格式不允许任何细微差别。一些用户报告对他们的社会距离感觉不好的习惯,例如,由于他们的角色照顾老年人和生病的家人:

我相信它有时看起来就像如果我不坚持规则。但如果将允许任何细微的问题,特别是关于游客的年龄和非正式照顾,例如,年长的家庭成员,这对我来说将是一个完全不同的结果。

此外,许多电子邮件包含反馈雷达的应用(表1第七,主题:雷达部分)。这些问题主要包括如何充分解释的数据地图,在地图的颜色并不总是对应的传奇。此外,许多电子邮件包含评论回答关于社会距离的尺度问题行为,最初的滑块,导致用户的负面反馈发现滑块难以使用,经常导致报告错误的联系人。反馈的基础上,滑块被替换为一个盒子,联系人可以手动输入的数量,和(+)和(-)按钮可以用来手动调整联系人的数量。这导致许多电子邮件收到积极的反馈。

Substudy 3:可用性测试在个人素养较低水平

输入的基础上,从荷兰中心专家的专业健康差异,和可用性测试会话与个人素养较低水平,几个优化目标是确定应用程序的设计。一个相关改善使用颜色和颜色对比提高能见度的信件。例如,用于颜色的蓝色框的默认答案自我报告监测问卷(图1)提供有限的颜色与白色的字母,有时导致用户默认答案选项被忽视了。进一步优化目标关于设计突出的差异答案选项用粗体文本或突显出,随着用户识字率较低水平可能难以区分不同的答案选项。可用性测试的参与者在一个会话表示如下:

我觉得这两次说同样的事情,我不明白的区别是什么。

其他输出关于优化设计指导最终用户更显式地在所有应用程序的功能。例如,他们需要为更多的问题,向下滚动,他们需要按“提交”后完成最后一个问题。

关于文本优化,添加信息有时建议提高理解的问题。例如,它建议我们定义“发烧”并不是每个人都意识到这是定义的体温≥38°C。提出了进一步,几个简化的文本,如简化或详细说明“中度到重度的心理锻炼。“其他文本建议包括写出“半米,”通常被解读为“1.5米1到5米”,个人素养较低。


主要研究结果

总共3进行了定性substudies,众多优化目标COVID雷达应用,无论是在设计和内容的应用。应用程序使用方便,个人调整应用程序的经验,和动力继续使用应用程序是采购和维护关键人口活跃用户与公共卫生监测COVID雷达等应用。此信息可用于用户满意度最大化,依从性,参与国家监测数据收集应用程序。

优化目标识别的研究包括突出设计元素,如使用足够的颜色对比的重要性以及使用更多的视觉效果和更少的文本增加应用程序的用户友好性和可理解性相应的文本。substudy 3的结果突出的重要性增加文本的可访问性和可理解性(健康)较低的个人素养的水平,例如,通过使用语言水平A2或B1根据欧洲共同的参考框架语言(12),与这个目标人群进行可用性测试。有限公司(健康)素养水平普遍和全球共同关心13- - - - - -15]。至关重要的是,公共卫生服务和工具简化其使用和内容来解决健康差距和增加此类服务的包容性。高用户参与和坚持是至关重要的成功的网络监视工具基于人群的监测和相应的成功预测建模(3,16]。

尽管使用智能手机应用的可行性和可接受性连续监测疾病似乎明显从文献[17- - - - - -20.),激励个人使用,特别是继续使用这样的工具仍然是具有挑战性的。substudy 1的结果表明,COVID雷达用户参与的主要动机是促进科学研究,更具体地说,帮助对抗流感大流行。这是符合可用的文学领域的公民科学证明参与公民科学项目的动机是为这类项目的科学目标(21]。此外,这些结果符合两个重要类别的社区参与科学项目被巴特森et al (22]:利他主义和集体主义。即动机参与增加另一个个体的福利和福利的一个群体,分别。类似,substudy 1的结果表明,应用用户急于知道完成了他们的数据,应用更新通知他们对近期使用COVID雷达数据分析是一个重要的动力来源继续使用应用程序,这是符合公民项目结果Land-Zandstra et al (21),表明参与者想要继续了解项目及其输出。我们的研究结果也证实,强调数据使用的有效手段支持个人参与公民科学项目,由罗特曼等(如图所示23]。

另一个潜在的策略来增加用户的行为和动机是有说服力的技术,如游戏化的公司:使用游戏元素,如nongame环境的挑战和奖励。虽然仍处于初期阶段,游戏化的初步证据支持使用增加使用互联网和用户参与干预重点(心理)健康和行为改变24]。然而,游戏化的影响开始,坚持,参与长期监测人群为基础的监测应用尚不清楚。最后,焦点小组访谈的结果表明,方便应用程序使用(例如,用户友好和有限的时间内需要完成监控问卷),使个性化的应用程序(例如,个人设置的颜色,布局,和提醒)其他重要因素时要考虑试图最大化用户参与度和积极性。

限制

substudies 1和2的主要局限性与样本偏差;焦点小组的参与者很可能是之上平均动力应用用户提供更加积极乐观的态度,项目和应用。同样,邮件反馈可能是由高度投入应用用户发送更频繁,而少激励用户或用户与负面评价或经验应用可能已经停止使用这个应用程序,因此不参与并达成substudies 1和2。另一个潜在的限制是基于网络的选择性偏差的性质面试:因为使用焦点小组进行缩放,参与者可能不熟悉这个项目可能会因为这个原因决定不参与。为了减少这种偏见,我们提供了一个实践轮参与者使用变焦没有经验。一位与会者利用这个机会。NS提供技术援助,并没有要求在3焦点小组访谈。然而,我们不能说其他潜在参与者数字素养较低并没有阻止参与。然而,参与者在substudy 3以前从未使用应用程序;因此,他们的反馈意见的文本特征应用无偏的经验与应用。此外,substudies 1和3的结果可能有限的普遍性,因为相对较低数量的参与者在这些substudies (N = 14 N = 4,分别)。使用基于web的面试进一步由充分评估身体语言的能力。 However, the interviews were conducted via videoconference, so facial expressions could be read and interpreted by the interviewer. Therefore, it is not believed that this biased our conclusions regarding the focus groups.

结论

自我报告以人群为基础的监测手机应用程序似乎是有用的在国家研究症状和社会距离的行为。公民使用这样一个应用程序的主要动机有关利他主义,集体主义,想要帮助科学发展和改善移动自我报告应用程序上下文中的公共卫生监测工具。方便应用程序使用,实现个性化的应用,和动机因素是采购和维护关键人口活跃用户与应用程序如COVID雷达。当设计应用和发展等内容,重要的是要考虑其可访问性对个人素养较低水平。这些结果不仅是至关重要的优化COVID雷达应用,最终增加其可接受性,包容性,和依从性,但也相关的大背景下公民科学项目,在大流行期间的公共卫生监测工具。

确认

作者要感谢灯塔,荷兰中心的专业健康差异,进行专家评审和可用性测试的个人素养较低水平。作者还要感谢所有采访中参与者的价值贡献和反馈。资助该项目获得了来自荷兰卫生研究与发展组织拨款10430042010016,10430022010001,10430032010011。投资者没有参与研究设计、数据收集和分析,决定发表或手稿准备。COVID雷达应用开发和维护合作在莱顿大学医学中心和科技公司Ortec。这个应用程序是免费的苹果应用商店和谷歌商店。

的利益冲突

没有宣布。

多媒体附录1

最终完整版本的COVID雷达自我报告的问卷。

多克斯文件,20 KB

  1. 在荷兰总冠状病毒病例。Worldometers。URL:https://www.worldometers.info/coronavirus/country/netherlands/[2021-09-05]访问
  2. Girum T, Lentiro K, Geremew M, Migora B, Shewamare COVID-19预防美国全球战略和有效性通过接触者追踪,筛选、检疫、隔离:系统回顾。太地中海健康2020年11月23日,48 (1):91 (免费的全文][CrossRef][Medline]
  3. 凡戴克WJ, Saadah NH, Numans我Aardoom JJ,粗毛格子围巾TN, Brandjes M, et al . COVID雷达应用:描述和验证的人口监测与COVID-19症状和行为。《公共科学图书馆•综合》2021年6月30日,16 (6):e0253566 [免费的全文][CrossRef][Medline]
  4. Kondylakis H, Katehakis DG, Kouroubali Logothetidis F, Triantafyllidis, Kalamaras我,et al . COVID-19移动应用:系统回顾文献。J地中海互联网Res 2020 09年12月,22 (12):e23170 [免费的全文][CrossRef][Medline]
  5. Menni C,巴尔德斯,Freidin MB, Sudre CH,阮LH、DA, et al .实时跟踪预测潜在COVID-19自述症状。Nat地中海2020年7月11日,26 (7):1037 - 1040 (免费的全文][CrossRef][Medline]
  6. 条例T,格雷厄姆女士,卡纳斯LS, Ganesh年代,Capdevila Pujol J, Sudre CH, et al .检测COVID-19感染热点在英国使用大规模的自我报告的数据从一个移动应用程序:一个前瞻性观察性研究。柳叶刀公共卫生2021年1月;6 (1):e21-e29。(CrossRef]
  7. 艾伦,我们Altae-Tran H,布里格斯J,金X,麦基G,史,et al。人口规模的纵向的映射COVID-19症状,行为和测试。Nat哼Behav 2020年9月26日,4 (9):972 - 982。(CrossRef][Medline]
  8. 邦尼R,巴拉德H,约旦R, McCallie E,研究菲利普斯T,逃避J, et al。公众参与科学研究:定义字段并评估其潜在的非正式科学教育。非正式科学教育发展中心(CAISE)。URL:https://files.eric.ed.gov/fulltext/ED519688.pdf[2021-09-05]访问
  9. Gillen丹尼尔斯N, P, K卡森,威尔逊即引导:考虑因素在设计在线使用视听技术在卫生研究焦点小组。Int J定性方法2019年11月19日,18:160940691988578。(CrossRef]
  10. 弗林R, Albrecht L,斯科特SD。两种方法为定性卫生研究焦点小组收集数据。Int J定性方法2018年1月17日,17 (1):160940691775078。(CrossRef]
  11. 盖尔NK,希斯克,卡梅隆E,拉希德年代,红木美国使用该框架的方法,多学科健康研究的定性数据的分析。BMC医学Res Methodol 2013年9月18日,13 (1):117免费的全文][CrossRef][Medline]
  12. 英文能力的描述。欧洲共同语言的参考框架。URL:https://www.commoneuropeanframework.org/cefr[2021-09-05]访问
  13. Paasche-Orlow可,帕克RM、Gazmararian JA Nielsen-Bohlman LT,陆克文RR。的流行程度有限的健康素质。J创实习生地中海2005年2月,20 (2):175 - 184 (免费的全文][CrossRef][Medline]
  14. 王侯R, Hassali M, Murugiah M系统回顾的流行在东南亚国家有限的健康素质。公共卫生2019年2月,167:8-15。(CrossRef][Medline]
  15. Sahm LJ,狼女士,柯蒂斯LM,麦卡锡美国流行的爱尔兰成年人健康知识有限。,85 J卫生Commun 2012年10月,17 (sup3): 100 - 108。(CrossRef][Medline]
  16. Twickler T, Hoogstraaten E, Reuwer AQ,辛格L, Stronks K, Essink-Bot毫升。低识字和有限的医疗卫生技术要求答案。Ned地中海杂志2009;153:A250。
  17. Aledavood T, Torous J,特里亚纳好不,Naslund是的,Onnela J, Keshavan m .分享服务跟踪睡在抑郁,焦虑,精神障碍。咕咕叫精神病学代表2019年6月04;21 (7):49免费的全文][CrossRef][Medline]
  18. 奥特曼,米尔L, Zillessen H, Blasone R, Gerdon F,巴赫R,等。可接受性的app-based COVID-19接触者追踪:越野调查研究。JMIR Mhealth Uhealth 2020年8月28日,8 (8):e19857 [免费的全文][CrossRef][Medline]
  19. Antosik-Wojcińska AZ, Dominiak M, Chojnacka M, Kaczmarek-Majer K, Radziszewska W,Święcicki Opara KR。智能手机作为双相情感障碍的监控工具:系统回顾包括数据分析、机器学习算法和预测模型。Int J地中海通知2020年6月,138:104131。(CrossRef][Medline]
  20. 多根E,桑德C,瓦格纳X, Hegerl U,科尔大肠分享服务监控情感性精神障碍的客观和主观数据:我们和我们要去哪里?系统的回顾。J地中海互联网Res 2017 7月24日,19 (7):e262 (免费的全文][CrossRef][Medline]
  21. Land-Zandstra, Devilee杰,Snik F, F Buurmeijer, van den Broek JM。公民科学智能手机:参与者的动机和学习。向公众了解Sci 2016年1月07;25 (1):45 - 60。(CrossRef][Medline]
  22. 巴特森CD, Ahmad N,曾荫权j .四个社区参与的动机。J社会问题2002年9月,58 (3):429 - 445。(CrossRef]
  23. 罗特曼D,泼里斯J,吊床J, Procita K,汉森D,帕尔c动态变化在协作的公民科学计划的动机。:ACM 2012会议的程序计算机支持的协同工作。2012年发表于:对CSCW的12:计算机支持的协同工作;2012年2月11 - 15日;美国西雅图华盛顿。(CrossRef]
  24. 弗莱明TM, de Beurs D, Khazaal Y, Gaggioli,里瓦克,Botella C, et al。最大化e-therapy和严肃游戏的影响:范式转变的时候了。前精神病学2016年4月18日;7:1-7货号65 (免费的全文][CrossRef][Medline]


常见问题解答:常见问题
LUMC:莱顿大学医学中心


编辑Mavragani;提交28.12.21;由艾哈迈德同行评议,E会议;评论作者15.02.22;修订版本收到25.05.22;接受16.06.22;发表09.09.22

版权

©Bas分裂,尼古拉斯·H Saadah尼尔斯·H通知,杰西卡·C Kiefte-de Jong Jiska J Aardoom。最初发表在JMIR造型的研究(https://formative.www.mybigtv.com), 09.09.2022。

这是一个开放分布式根据条知识共享归属许可(https://creativecommons.org/licenses/by/4.0/),它允许无限制的使用、分配、和繁殖在任何媒介,提供原工作,首次出版于JMIR造型的研究,正确地引用。完整的书目信息,原始发布在https://formative.www.mybigtv.com上的链接,以及这个版权和许可信息必须包括在内。


Baidu
map