JMIR J医学网络杂志 医学互联网研究杂志 1438 - 8871 卡塔尔世界杯8强波胆分析 加拿大多伦多 v23i12e24114 34931998 10.2196/24114 原始论文 原始论文 设计和开发一套亲密伴侣暴力筛查和安全规划Web应用程序:以用户为中心的方法 Kukafka 丽塔 麦克唐奈 凯伦 玻璃 南希 O 'Campo 帕特丽夏 博士学位 1
MAP城市健康解决方案中心 圣迈克尔医院 30债券圣 多伦多,ON, M5W 1W8 加拿大 1 4766304000 patricia.ocampo@unityhealth.to
https://orcid.org/0000-0003-4549-7324
Velonis 艾丽莎 英里每小时,博士 1 2 https://orcid.org/0000-0002-9787-979X Buhariwala 珍珠 妈,英里/小时 1 https://orcid.org/0000-0001-9441-8691 Kamalanathan Janisha 垃圾 1 https://orcid.org/0000-0003-4807-2428 哈桑 摩诃Awaiz 黑带大师 1 https://orcid.org/0000-0002-7940-3181 Metheny 尼古拉斯 博士,RN英里每小时, 1 3. https://orcid.org/0000-0003-2295-2945
MAP城市健康解决方案中心 圣迈克尔医院 在多伦多 加拿大 社区卫生科学部 伊利诺伊大学芝加哥公共卫生学院 芝加哥, 美国 护理与健康研究学院 迈阿密大学 佛罗里达州科勒尔盖布尔斯的 美国 通讯作者:Patricia O'Campo patricia.ocampo@unityhealth.to 12 2021 21 12 2021 23 12 e24114 4 9 2020 20. 10 2020 12 12 2020 10 8 2021 ©Patricia O’campo, Alisa Velonis, Pearl Buhariwala, Janisha Kamalanathan, Maha Awaiz Hassan, Nicholas Metheny。最初发表在《医疗互联网研究杂志》(//www.mybigtv.com), 2021年12月21日。 2021

这是一篇开放获取的文章,根据创作共用署名许可协议(https://creativecommons.org/licenses/by/4.0/)发布,该协议允许在任何媒体上不受限制地使用、分发和复制,前提是要正确引用最初发表在《医学互联网研究杂志》上的原始作品。必须包括完整的书目信息,//www.mybigtv.com/上的原始出版物链接,以及版权和许可信息。

背景

移动健康(mHealth)技术的普及导致了针对几乎所有疾病和疾病管理的大量应用程序的开发。移动保健和电子保健解决方案也不例外,可提高对亲密伴侣暴力的认识和周围的安全。这些应用程序允许女性控制对这些资源的访问,并在需要这些资源时,通过正确的设计功能,提供无限的安全访问。然而,很少有应用程序是与目标用户密切合作设计的,以确保相关性和有效性。

客观的

本文的目的是讨论一套基于证据的移动健康和电子健康应用程序的设计,以促进不安全的关系行为的早期识别和量身定制的安全计划,以减少暴力造成的伤害,包括我们与预期用户群体合作和寻求输入的方法。

方法

采用以用户为中心的方法和以人为本的设计方法,设计了一套3个基于应用程序的安全规划干预措施。

结果

对基于应用程序的干预措施设计套件的审查揭示了所面临的挑战和吸取的教训,这些教训可能为未来设计循证移动卫生和电子卫生干预措施提供信息。

结论

遵循以用户为中心的方法有助于为边缘和弱势群体设计移动卫生和电子卫生干预措施,并产生了改进干预措施设计的新颖见解。

亲密伴侣暴力 基于web的应用程序 女性 以用户为中心的设计
简介

近年来,基于网络的和移动卫生技术得到了极大扩展,为个人获取信息和资源以管理和改善健康和福祉提供了独特的空间[ 1- 3.].全球有超过50亿人订阅无线流动服务[ 4],数字空间允许那些寻求信息或支持的人以用户控制的、谨慎的和可访问的方式获取信息或支持[ 5- 7].这项技术填补了亲密伴侣暴力(IPV)幸存者的一个独特空白,使个人能够自行获取有关安全和资源的信息。移动健康工具可以在任何时间和任何地点使用,幸存者可以根据需要多次返回信息,以探讨他们的关切和他们的选择,因为他们的情况发生了变化。在过去的20年里,出现了300多款基于网络的IPV移动应用[ 3. 8],但只有少数得到了广泛采用。未能获得关注的应用程序的一个局限性是,它们无法满足特定社区或目标群体的需求,包括识别本地和适当的资源。

伴侣暴力实施科学小组是研究人员、服务提供者和IPV幸存者之间的合作;我们的工作重点是共同创造支持个人安全和自决的干预措施。作为这些努力的一部分,我们确定需要为我们工作的社区量身定制IPV电子筛选和安全规划资源[ 3. 4].虽然有许多应用程序可以帮助妇女识别IPV并制定安全计划,但我们的社区合作伙伴担心,许多应用程序没有充分解决许多妇女为提高自己和孩子的安全而经历的非线性和多阶段过程[ 9- 11].获得对采取行动可能带来的危险的意识是这些挑战之一,经历过IPV的女性经常哀叹,这种意识——以及如何增加关系安全性的信息——没有在过程中更早地出现[ 12- 14].虽然我们最初的目的是开发一种工具,帮助医疗保健提供者在门诊骨科诊所筛查IPV,但我们的社区合作伙伴——包括ipvv的幸存者——认为基于web的移动健康工具使用简单、快速,专门专注于识别虐待行为的“危险信号”,并可以帮助用户确定为其情况量身定制的安全选项,是跨设置的关键需求。虽然我们认识到所有性别的人都会经历IPV,但我们的研究关注的是经历IPV的最大群体:与顺性男性发生关系的顺性女性。

首先,我们研究了各种旨在帮助女性确定自己是否处于虐待关系中的筛选应用程序。在预览了北美地区的各种公开筛选应用程序后,我们发现这些工具通常遗漏了1种或更多类型的暴力,或者没有使用经过验证的筛选问题来检测IPV [ 15 16].这导致我们决定创建自己的筛选应用程序,可以帮助广泛的个人识别自己或他人关系中的不安全行为模式,并立即获取有关虐待和当地服务的信息。

其次,对于可能经历与IPV相关行为的一小部分女性,需要一个单独的应用程序,可以帮助她们评估其情况的严重性(包括致命风险),并促进针对其情况的安全规划行为。一个现有的应用程序提供了我们想要的大部分内容。由约翰霍普金斯大学的研究人员开发[ 17- 19,并由西部大学的研究人员为加拿大观众量身定制[ 20. 21, MyPlan应用程序是一款基于证据的移动健康应用程序,旨在增加用户对其关系中潜在危险模式的理解,减少他们在采取行动改变这些模式时的矛盾心理或决策冲突,并在国际随机对照试验中被发现可以减少未来的IPV [ 17 20. 22- 24].在与我们的目标人群进行接触,并与约翰霍普金斯大学和西部大学的团队进行磋商后,我们决定在这个证据基础和强大的基础上,解决大多伦多地区(GTA)社区合作伙伴确定的我们感兴趣的人群的额外需求:寻求更多关于IPV的信息的女性,其中大多数人目前没有经历过任何不安全的关系行为,以及第二群患有IPV的女性,她们需要关于虐待的潜在严重后果(甚至包括致命性)的信息,并获得参考地理和文化相关策略和资源的量身定制的安全规划。

本文描述了我们开发3个基于证据的应用程序的严格过程,每一个应用程序都是为特定的受众开发的,并为他们的特定需求量身定制。运用以人为本的设计元素[ 25,我们确保最终用户(有IPV风险的妇女和经历IPV的人)参与我们移动健康工具套件的所有设计和测试阶段。这包括在整个设计和测试过程中,关于体验质量、使用应用程序的安全感以及工具本身的感知帮助的迭代启发[ 26 27].很少IPV筛选或安全规划应用程序提供关于产品开发或测试的详细信息,而且很少有关于应用程序开发过程、用户测试和评估的同行评审证据[ 8].由于这些工具对关心自身或亲人安全的妇女可发挥关键作用,因此必须确保最终产品既能解决当地社区妇女的主要关切,又能利用循证过程提供知识或带来变革。因此,我们通过描述我们构建三种独立但互补的IPV移动健康干预措施的迭代的、社区参与的方法,开始阐述这一过程:IPV筛查工具(WithWomen)、个性化安全规划web应用程序(Pathways),以及该应用程序快速适应COVID-19期间IPV患者的生活现实(促进紧急情况下的安全,或PROMiSE)。这一套应用程序总结在 表1

方法 方法

我们设计和调整应用程序套件的方法依赖于与卫生保健提供者的合作关系,他们致力于在其门诊设置中实施筛查项目,以及IPV庇护所的服务提供者,有IPV生活经验的女性咨询小组,以及为IPV女性生活的同伴支持网络。我们觉得在整个设计和改编过程中保持这些观点很重要。我们的合作伙伴扮演了许多角色:他们就关键设计功能和内容向我们提供建议,为我们联系有实际经验的女性,她们会就网页应用程序的筛选问题和功能提供反馈,告诉我们该地区应该在网页应用程序中列出的资源,为我们联系语言专家,以确保内容适合我们的人群。下面将讨论开发这些工具的过程。所有3个应用程序都获得了圣迈克尔医院研究伦理委员会(REB # 15-361)的批准。 表1概述了我们的应用套件的组成部分,它们的目标人群和主要创新,而 表2回顾了用于开发和测试每个移动健康工具的样本的人口统计学特征。

参与各种调查和访谈的人的人口统计学特征,为我们的筛查和安全决策支持应用程序的开发提供信息 表2

合作伙伴暴力实施科学应用套件组件。

应用程序功能 严肃过滤网 通路 承诺一个
目标人群 女人和男人的关系 在男女关系中有中度到高度安全顾虑的女性 在突发公共卫生事件期间对两性关系存在中度至高度安全担忧的女性
目的 筛选潜在的IPVb 安全规划和本地资源连接 修改突发公共卫生事件时的安全规划和当地资源连接
年的版本 2018 2019 2020

一个承诺:促进紧急情况下的安全。

bIPV:亲密伴侣暴力。

研究参与者的人口统计学特征一个

人口统计资料 检查应用程序 途径的应用 承诺b应用程序
认知访谈(n=18), n (%) 匿名接触调查(n=16), n (%) 应用程序用户测试(n=41), n (%) 人员:初步用户测试(n=19), n (%) 客户端:用户测试(n=46), n (%) 用户测试(n=7), n (%)
年龄、年
16-34 5 (28) 9 (56) 18 (44) 8 (42) 11 (24) 3 (43)
- 55 + 13 (72) 7 (44) 22 (54) 11 (58) 35 (76) 4 (57)
出生在加拿大和土著
是的:土著 0 (0) 1 (6) 4 (10) 4 (20) 8 (17) 3 (43)
是的 10 (56) 9 (50) 17 (41) 8 (42) 16 (35) 0 (0)
没有 8 (44) 7 (44) 20 (49) 10 (53) 21 (46) 4 (57)
IPV的经验c在过去的5年里,参与者或他们身边的人
是的 9 (50) 不是问 31 (76) 13 (68) 39 (85) 2 (28)
没有 8 (44) 不是问 10 (24) 6 (32) 7 (15) 5 (72)

一个由于所选类别缺少响应,总数并不总是100%。

b承诺:促进紧急情况下的安全。

cIPV:亲密伴侣暴力。

开发WithWomen筛选应用程序 选择筛选问题

我们试图有有效和可靠的筛选问题。在审阅了多种有效的IPV筛选工具和同行评审的文献后[ 28,我们选择了 伤害、侮辱、威胁和尖叫(HITS)仪器作为我们筛选应用程序的基础。HITS仪器简短,已用于全科实践和急诊科设置[ 29 30.],表现出可接受的敏感性(88%)和特异性(范围86%-97%),并在不同人群中进行了广泛测试(例如,在女性/男性、西班牙裔和非裔美国女性以及西班牙语人群中进行了测试)[ 31 32].然而,HITS的一个局限性是它不能识别微妙的IPV体验,如强制和控制行为,以及性IPV体验。我们通过查阅与强制控制相关的验证筛选问题的同行评审文献,以及与社区合作伙伴的对话(例如,“合作伙伴控制你的穿着”),确定了几个额外的问题。

为了确保我们确定了那些最需要立即帮助的应用程序用户,我们将召回周期限制在过去12个月,并按频率提问,而不是只确定行为是否发生过。此外,我们有意地询问了短期(如约会)和长期(如伴侣)关系。

测试的问题

为了确保我们的筛选问题是可接受的和适当的,我们征求了各个领域女性的意见。我们对当地购物中心的女性进行了匿名调查。我们找到了在美食广场工作的女性,解释了我们的研究,并询问她们是否有10分钟的时间完成一个简短的调查。我们请女性就问题的清晰度和可接受性,以及我们是否遗漏了关于某一特定类型暴力的问题,向我们提供反馈。我们还向在我们的合作社区机构(如妇女庇护所、为司法系统中的妇女服务的组织)获得服务的女性客户提出了同样的问题,从而咨询了更可能有IPV生活经历的女性。我们还咨询了更广泛地为妇女提供服务的服务提供者,如诊所或帮助妇女就业或住房的机构,以征求他们的意见。

接下来,当我们缩小候选问题集时,我们进行了3个周期的认知面试,以确保问题的清晰度[ 33].这些是面对面的调查,要求女性用自己的话告诉我们每个问题的问题是什么,并就任何难以理解或不恰当的术语或短语获得她们的建议。我们根据每个周期之间收到的反馈修改了问题。我们还试图测试我们的问题的可靠性,将这些问题管理给一个妇女子集,并在1个月后联系她们重新进行调查。通过计算类内相关系数(ICC)来评价试验与重测之间的一致性。我们还通过捕捉安全相关活动的问题建立了收敛效度的证据,如与咨询师谈论关系问题或因关系问题而缺席工作[ 34].

最终筛选仪器由9个项目组成。下一步是根据个人在全面筛查仪器上的总和得分来确定风险水平。为此,我们首先为每个问题的答案指定一个风险值。使用有关问题中描述的暴力严重程度的信息,并与类似问题的现有严重程度评级相印证[ 17 32,我们为每个问题分配风险值,最低风险值为0,最高风险级别为3。例如,如果被调查者的伴侣,前伴侣,或被调查者约会过的人经常侮辱她,她就会受到特定问题的2级风险。在身体暴力项目中,如果她经历了任何数量的殴打、拳打脚踢、勒死或用武器伤害,她自动得到3分。所有9个问题的总分为0-4分表示很少到没有安全担忧,5-8分表示可能有安全担忧,9-24分表示在这段关系中有中等到高度的安全担忧 文本框1得分汇总)。

确定我们的筛选问题

利用认知访谈的反馈,我们对问题的措辞做了轻微的修改,以确保它们对女性的可接受性。例如,关于性暴力的问题最初使用了“胁迫”一词;然而,并不是所有接受采访的女性都理解这个词背后的含义,所以这个词被改成了“压力、威胁或强迫”。总的来说,潜在用户对这些问题的接受度和清晰度都很高,这很大程度上是因为我们依赖于以前验证过的筛选工具作为问题的来源。通过16次可靠性访谈(ICC 96%;95%可信区间90% - -99%)。当样本减少到那些对筛查问题报告至少一个肯定答案的妇女时,可靠性是相似的(ICC 95%;CI 79% - -99%)。

WithWomen最后的快速亲密伴侣暴力筛查问题,回答的分数被分配到反映关系中的安全风险水平。

1.在过去的12个月里,你有多少次在现任伴侣或约会对象面前的言行让你感到不舒服?

0 =不,很少,有时候

1 =经常

2.在过去的12个月里,你的伴侣、前伴侣或约会对象侮辱你或以高人一等的口气对你说话的频率有多高?

0 =不,很少

1 =有时

2 =经常

3.在过去的12个月里,你的伴侣、前伴侣或约会对象对你大喊大叫或咒骂你的频率有多高?

0 =不,很少

2 =有时

3 =经常

4.在过去的12个月里,你的伴侣、前伴侣或你的约会对象控制你见谁、去哪里、做什么、穿什么吗?

0 =没有

2 =很少,有时候

3 =经常

5.在过去的12个月里,你的伴侣、前任或约会对象有多少次让你害怕他们?

0 =没有

2 =很少,有时候

3 =经常

6.在过去的12个月里,你的伴侣、前任或约会对象威胁要伤害你或你在乎的人的频率有多高?

0 =没有

2 =很少

3 =有时,频繁

7.在过去的12个月里,你的伴侣、前任或约会对象身体上伤害过你多少次?

0 =没有

2 =很少

3 =频繁,有时候

8.在过去的12个月里,你的伴侣、前任或约会对象有多少次用武器殴打、拳打脚踢、勒死你或伤害你?

0 =没有

3 =很少,有时,频繁

9.在过去的12个月里,你的伴侣、前伴侣或约会对象有多少次强迫、威胁或施压你,让你在不情愿的情况下参与任何性活动?

0 =没有

3 =很少,有时,频繁

每个问题的分数被总结并分类为以下类别。在快速筛选的最后,结果屏幕显示颜色(如黄色)和结果的解释(例如,“关于你们的关系有一些值得关注的事情”)。

0-4:健康(绿色):在你们的关系中很少或没有安全方面的担忧

5-8:谨慎(黄色):你们的关系中有一些事情需要关注。

9-24日:确认虐待(红色):你的关系有很多安全问题。

我们通过将9项暴力量表的得分与对女性是否参与关注关系安全的女性可能会参与的活动的回答相关联,建立了量表的同步效度:在互联网上搜索有关IPV的信息;与社工或其他专业人士或家人和朋友谈论她的关系;因感情问题而旷工;或者因为感情问题报警。IPV筛选器得分与4种行为之间的Spearman相关性在0.72 ~ 0.82之间。我们确实询问了另外一种行为,因暴力而寻求医疗救助,其与IPV筛选器的相关性较低(0.57)。因此,除了寻求医疗服务这一项外,所有项目的同时效度都中等高,但考虑到这种活动发生的次数相对较少,而且只会发生在一种暴力——身体暴力——中,这种水平的相关性是可以预期的。WithWomen的登陆页面显示在 图1

严肃的着陆页。

我们的WithWomen筛选应用程序的用户旅程呈现在 图2,说明了应用程序在筛选IPV时的简单性和完整性,提供了筛选结果的解释,并提供了与IPV预防或管理相关的资源的链接。此外,该应用程序可以用于服务公众或在诊所设置中使用,提供机会与诊所工作人员分享筛查结果。

严肃的用户的旅程。

开发道路安全规划应用程序 概述

如前所述,现有的安全规划和决策支持应用程序不能满足我们目标人群的独特需求。特别是,我们从与社区的合作中了解到,当前的应用程序需要在语言、互动性水平、用户旅程的灵活性、识字障碍人群的可访问性、内容和安全功能等方面做出改变,因此需要一个新的应用程序。由于Pathways的目的是专门为那些自认为正在或最近经历IPV的用户(理想情况下,因为他们使用过WithWomen应用程序)提供工具,我们设计了Pathways,向用户介绍应用程序中可用的几个选项,以开始制定安全规划决策。这些选项包括:(1)评估暴力行为在他们关系中的严重性、危险性和潜在致命性;(二)确定安全重点;(三)了解与其优先事项相一致的安全措施;(4)学习健康和不健康的关系。我们借鉴了现有的IPV安全规划和决策支持应用程序,并针对我们的目标人群——加拿大城市女性——进行了关键修改。其中包括调整应用程序,以解决女性在仍处于或刚刚结束暴力关系时最关心的安全规划问题。因此,这款应用程序的目标是让女性优先考虑自己的安全规划需求,并获得量身定制的支持、切实的行动项目,以及与她们最关心的问题相匹配的当地资源。

步骤1:原型开发

为了开发我们的应用程序的原型,我们招募了19名服务提供者和31名IPV幸存者,让她们与现有MyPlan应用程序的各个部分进行交互。除此之外,我们还邀请了一小部分有实际经验的参与者在线审查整个应用程序。参与者是从大多伦多地区8个以ipv6为重点的组织中招募的。我们用2个月的时间完成了这项用户研究,记录了他们的偏好、与现有应用内容和活动的交互体验,并提出了修改建议,以指导我们的Pathways应用的开发。

然后,我们利用两种来源的数据来确定对我们的用户最重要的具体问题,这些问题可能与最初MyPlan应用程序针对的大学年龄女性不同。我们招募了另外16名没有参与现有安全规划应用程序评估的女性,她们拥有不同程度的IPV生活经验。参与者完成了一项匿名调查,该调查要求他们选择10个对正在经历IPV的女性来说有多重要,因为她们要对自己的安全做出重要决定。除了现有应用程序中考虑的问题外,我们还回顾了文献,咨询了服务提供商的关键信息提供者,得出了这10个担忧,包括资源(财务、住房、法律服务)、隐私、移民和与职业相关的担忧[ 13 35) ( 表3).当读写能力面临挑战时,一名训练有素的数据收集人员通过朗读说明、解释活动并写下他们的回答来支持受访者。对参与者的这些回答进行了总结,并选择得分最高的优先事项作为优先领域,妇女可以根据这些优先领域调整其在Pathways的安全规划活动。

为路径的“我的关注”部分的每个优先领域进行相对排名。

排名 安全优先级 相对排名
1 有资源(资金、住房、法律支持)
2 你亲近的人的健康和幸福
3. 住房问题
4 隐私
5 你的个人健康和幸福 温和的
6 语言障碍 温和的
7 研究和职业 温和的
8 移民问题 温和的
9 对伴侣的感觉
10 与社区的联系
步骤2:用户测试

一旦收集到原型数据,我们就与一家软件开发公司Tactica Interactive合作。 36],以开发“路径”的工作原型。使用这个原型并遵循HCD原则,我们测量了应用程序的用户体验,特别关注功能、导航的便利性和每个定制关注部分的全面性[ 26].这一过程包括要求IPV幸存者和服务提供商参与应用程序的在线版本,并在匿名调查中对不同部分的可用性提供反馈。共有26个人,包括5个IPV服务提供商,花了大约30-40分钟来审查应用程序的所有组件。用户研究是在4个IPV服务机构进行的。其中一个组织为不会说英语的客户提供训练有素的口译员,使团体活动更具包容性。由于在这种情况下已经有口译人员,5名会说英语以外语言的妇女能够与一名口译人员和一名训练有素的数据收集人员合作,完成她们的调查回答。使用Pathways的用户体验概述在 图3

通路的着陆页。

步骤3:应用程序优化 为路径应用程序敲定内容

在用户优先级部分,我们将参与者的调查数据和关于应用内容中可能缺失的开放性问题分享给用户研究参与者,为我们在应用的优先级部分中添加哪些内容提供了许多选择。

已证实,将安全选项与用户的优先事项联系起来,可减少有关IPV安全规划的决策冲突[ 17 19 22].为了更紧密地将用户的关注点与他们的安全计划联系起来,“资源”被进一步划分为“财务”、“住房”和“法律支持”,作为基于资源的关注点的独立类别。我们从优先设置活动中删除了“儿童福祉”,而是在路径应用程序中加入了一个专注于儿童的安全计划,作为一个单独的部分,它可以为选择它的人提供更突出的位置。

选择列入“路径”的最后5类关注事项都与一项行动计划相关联,该计划建议用户针对每个关注领域可采取3-6项具体行动。与排名较低的优先级相关的安全步骤被添加到应用程序的可选查看部分。例如,改善“隐私”的建议被包括在跟踪相关的安全计划中,也包括在“隐藏你的踪迹”部分,其中包括安全浏览网页的说明,同时,解决移民问题的建议被添加到应用程序的“法律支持”部分。路径中添加了算法,这样用户优先级最高的安全计划就会首先呈现给用户。

最后的途径

总的来说,用户测试访谈证实了Pathways对我们人群的有用性、可理解性、适当性和全面性。受访者或我们的顾问组没有建议对安全规划相关内容进行重大修改。然而,应用程序的语言和结构出现了一些共同的主题。例如,建议简化语言,减少文本,尽可能使用复选框。在一些网站上,“提示”、“优先级”和“优先级”等词不被认为是通用语言。我们简化了语言并更改了部分标题(例如,在Pathways中,“我的优先事项”变成了“我的担忧”)。一些客户和服务提供商评论说,需要使用重申,而不是警告的语言。服务提供者也承认,需要在提供确认和肯定之间取得平衡,而不将严重危险的行为正常化。这与应用程序的危险评估部分尤其相关。我们的团队删除了危险评估部分中但没有在暴力严重性评级中使用的问题,并在问题的开头用简单的语言内容解释了提出这些问题的理由。

几位与会者讨论了根据不同人口的不同需要纳入更有针对性的资源的好处。这些建议主要围绕着针对少数族裔和有语言障碍的人的社区支持、文化敏感服务和法律咨询。考虑到语言、过境便利和费用是获得正式支持的障碍,我们列入了可由人们免费或不需转诊或医疗保险即可获得的支持服务链接。在许多情况下,我们在Pathways中列出了以多语言、多元文化或多站点服务环境提供的支持服务,并在可能的情况下包括按邮政编码搜索资源的选项,以使妇女能够找到最合适的资源。

另一个关注的关键领域与应用程序的隐私、安全和可访问性有关。为了解决这些问题,我们在每个应用程序页面的底部加入了一个快速退出栏,允许用户通过重定向到谷歌搜索引擎来快速隐藏他们的屏幕。我们还在应用程序中增加了一个名为“在线安全”的单独部分,其中包含安全浏览网页的详细信息。我们的包容性设计实习生重新设计了我们应用程序中最初描述健康和不健康关系方面的“你知道吗”部分,将其变成一个活动,让女性交互式地探索与暴力相关的信息,以增加她们对关系暴力的知识。为了增加视觉障碍或识字率低的用户的可访问性,我们在应用程序的每个页面都添加了音频功能。该功能会大声朗读所有文本,并在每个屏幕上叙述导航选项。

大多数Pathways beta测试者都提供了积极的反馈(使用应用的良好体验),并指出他们会向其他人推荐这款应用。我们的调查中得分最低的部分是关于导航的易用性,15/46(33%)的受访者指出应用程序中有太多的文本。为了解决这些问题,我们把这些部分带到由我们医院的患者教育部门主办的平体写作研讨会上,在那里,平体语言专家审阅材料并提供反馈。然后我们聘请了一位编辑来整合建议,并将应用程序标记部分的文本数量减少了20%。我们还简化了用户流程,将文本的某些部分移动到单独的页面,并使这些页面可选查看。

我们应用程序的数据

出于安全考虑,也考虑到我们的线人在开发这套应用程序的过程中所表达的对隐私的担忧,我们将应用程序设计为匿名收集所有数据。因此,不会收集或存储名称、IP地址或任何其他标识符。不过,研究团队确实会收集其他数据,以提高质量(例如,用于筛查的分数分布、使用Pathways的人的危险评估、优先关注的问题,或一天中哪些时间使用这些应用程序),但我们会匿名检查所有数据。我们还确保在任何访问过我们的应用程序的设备上都不会留下任何痕迹。这些数据存储在北美的服务器上,研究团队拥有这些数据。

发展中国家承诺

该应用程序于2019年12月发布。然而,到2020年初,COVID-19大流行和减缓其传播所需的政策(如居家令、服务能力下降)显然将导致与虐待伴侣近距离接触的时间增加、广泛的不确定性和财务压力,这些都是已知会增加IPV风险的压力因素[ 37].自大流行病出现以来,知识产权感染的比率确实有所增加[ 38 39由于能力下降和需求增加,许多妇女无法获得IPV服务,因此IPV筛查和安全规划移动卫生干预措施对于在本次和未来的公共卫生突发事件中最大限度地提高妇女的安全至关重要。然而,我们从社区合作伙伴那里得到的反馈是,路径应用程序的某些方面不太适合应对突发公共卫生事件。例如,“路径”中的决策支持工具以寻求家庭以外的帮助和与社区服务的连接为中心,许多社区服务要么因政府限制而不开放,要么因资金紧张而关闭,要么因需求增加而超负荷。很明显,需要一种安全规划工具,应对妇女在公共卫生紧急情况下面临的现实,提供最新的相关信息,并就以安全、谨慎的方式最大限度地提高安全的行动提供建议。

使用同样的hcd方法,我们开始了一项快速研究项目,将路径调整为COVID-19期间的使用,该项目包括(1)对同行评议和灰色文献进行快速系统搜索,以寻找在COVID-19情况下经历IPV的妇女可能会发现有帮助的策略,(2)召集GTA的IPV幸存者和IPV服务提供者专家小组,集思广益,为在COVID-19情况下经历IPV的妇女可能会发现有帮助的新的和修改的策略。这项为期3个月的快速研究得出了22种策略,这些策略或高度推荐或略推荐(例如,与他人保持联系并做好安全计划),以及6种不推荐(例如,隐藏可能被用作武器的物品),因为它们可能会加剧暴力。有了关于当前遭受暴力的妇女如何在2019冠状病毒疫情期间最大限度地保障自身安全的新信息,我们再次与Tactica公司取得联系,从现有的Pathways应用程序开发新的PROMiSE应用程序。

除了更新内容外,我们觉得特别重要的是要确保应用程序的外观和感觉是谨慎的,因为更多的女性可能在接近施暴者的情况下使用PROMiSE。为此,我们与Tactica合作,为PROMiSE开发了伪装功能,将应用内容覆盖到一个无害的网页上。基于IPV幸存者的反馈,我们选择了家庭和花园电视的Pinterest主板作为无害的登录页面,这将不太可能引起虐待者的怀疑。当女性访问这个网站时,她会从广告和营销材料中认出右上角的PROMiSE标志( 图4).当点击此按钮时,PROMiSE内容将以“弹出”的形式出现( 图5).除了“WithWomen”和“Pathways”中出现的快速退出栏外,用户点击包含“PROMiSE”内容的弹出框之外的任何地方,应用程序本身就会隐藏起来,只会显示出后台网站。女性第一次访问该网站时,会得到一个互动教程,解释如何隐藏内容,并使用热键(桌面版)或热点(触屏设备上)使其重新出现。

承诺登陆页伪装。

实际的PROMiSE登陆页面。

由于PROMiSE的布局和技术方面与Pathways完全相同,我们放弃了大量的技术用户测试,以便在疫情期间快速推出这款应用程序。然而,一旦PROMiSE的原型可用,我们邀请了有IPV和IPV服务提供商的实际经验的女性来浏览应用程序,并就其新外观和感觉提供反馈,并确定在应用程序创建过程中可能出现的任何故障(n=7; 表2).这些信息将被纳入PROMiSE的后续更新中。PROMiSE于2020年12月1日启动

讨论 经验教训

基于网络的和移动健康应用程序在IPV中越来越普遍[ 1 3.].本文展示了我们如何在现有的IPV筛查和安全规划网络应用程序的基础上,定制和创建一套适合我们当地的妇女群体的工具,这些妇女在COVID-19之前和期间面临或需要规划IPV的安全。此外,鉴于基于网络和移动健康ipv4相关应用所开展的一系列预防和教育活动,我们将努力重点放在两个特殊挑战上:(1)帮助女性尽早了解不安全的关系行为;(2)一旦暴力行为被确认,量身定制的安全规划,使安全最大化。这些应用程序的设计是为了补充我们大都市地区现有的大量资源和服务,同时也为了提供一种独特的资源,考虑到女性的特殊优先事项,在一天中的任何时间和任何可以上网的地方都可以访问。

对移动健康、计算机和基于网络的应用程序的系统回顾指出,在应用程序的设计中,缺乏与受影响社区的参与,这影响了此类应用程序的相关性和利用率[ 3.].我们在工作中利用HCD的要素解决了这一限制,HCD向IPV幸存者和与这一人群密切合作的卫生保健提供者寻求投入和共同创造。虽然这需要我们在每个研究阶段投入更多时间,但这也增加了我们的应用与目标用户的相关性。我们发现,考虑到我们应用程序所针对的IPV阶段,这一点非常重要:在WithWomen筛查中,我们的目标人群是尚未意识到其关系中存在安全威胁的女性;在Pathways和PROMiSE筛查中,我们的目标人群是在亲密关系中遭受不同程度暴力的女性,她们需要采取某种行动来提高关系中的安全性。而现有的应用程序[ 18]是我们的“路径”和“承诺”的模板,我们的应用程序的新功能是预期用户要求和支持的,包括与他们的偏好一致的优先级、健康关系信息的互动部分、用户在使用过程中自由访问应用程序的任何部分、纯语言文本和音频选项。

我们从幸存者、提供者和文献中了解到,虐待本身会影响幸存者对他人的信任,影响他们对自己的信心,影响他们在人际关系和与安全相关的行动中做出正确的决定。此外,尽管幸存者拥有巨大的力量和韧性,但他们在人际关系中经常受到施暴者的告诫和诋毁,这导致幸存者普遍存在自我怀疑和自责,进一步影响了有关安全的信息处理和决策[ 40- 44].我们的用户研究和合作伙伴的建议帮助塑造了应用程序中文本的语言和语气。由于妇女以及保健和社会服务提供者参与了进行用户研究的过程,我们采用了肯定的和基于力量的语言和短语。此外,考虑到生活在虐待中的幸存者自我怀疑的程度,我们还使用了这样的语言:在优先信任用户保持安全行为的本能的同时,也鼓励安全规划行动。我们无法克服的一个问题是筛选量表中缺失数据的影响。如果受访者跳过1个或多个问题,则跳过的问题将使用0值,这可能会人为地降低实际风险水平。

与合作伙伴密切合作还有其他好处。我们的骨折临床合作伙伴使用我们的WithWomen IPV筛查应用程序,采用了一种技术增强的方法来筛查IPV。我们使用实施科学策略来帮助他们开发合适的筛查方案,将对他们繁忙的临床日程的影响降到最低[ 45这是诊所第一次获得有关筛查和IPV流行率的数据。虽然我们没有计划在服务或医疗保健环境中更广泛地使用我们的应用程序,但由于大流行,与客户的虚拟访问显著增加了,同时也有机会在客户访问期间或期间纳入技术增强的筛查或安全规划。随着PROMiSE的发布,其重点是公共卫生紧急事件期间的安全规划和增强的安全功能,我们已被供应商要求协助创建选项,在他们与客户的虚拟交互中包括我们的应用程序。

由于“我的计划”带来积极安全规划结果的关键功能被保留在了我们的Pathways应用程序中,我们认为另一项临床试验表明,使用该应用程序超过常规护理是不合理的[ 19].然而,我们正计划使用创新的单例实验研究设计,在更小的参与者样本中演示PROMiSE应用程序在家中使用是安全的,并对IPV知识和安全规划活动产生积极影响[ 46].

虽然我们有基于证据的模型可以借鉴,但我们发现创建这些应用所花的时间远远超过我们的预期,原因有几个。开发应用部分原型、获取反馈和修改原型的迭代性质和多个周期都需要时间。我们的研究团队必须在一些领域建立能力,例如当我们的初始设计试图将我们的快速IPV筛选应用程序与医院数据系统连接时,了解隐私问题,理解谨慎应用程序设计的技术方面。由于我们依赖于专家顾问和我们医院的IT部门,在一系列重复的对话中讨论应用程序的功能是否符合隐私要求(例如,寻找一种安全的方式将位于外部服务器上的应用程序与基于医院的电子医疗记录连接起来),我们的过程进一步减慢了,因为我们不是医院IT关注的优先事项。最后,由于我们所选择的初始技术开发合作伙伴,我们还经历了严重的延迟。我们的团队最初聘用了一个连接临床医生与生物医学和计算机工程学生的实验室服务,将技术解决方案应用于临床医生在实践中面临的现实问题。我们渴望给学生团队机会来开发我们的应用程序,同时削减开发成本,以适应我们有限的预算。不幸的是,由于我们缺乏开发应用程序的经验,我们无法与学生团队沟通技术规格,以及我们不了解开发这些应用程序的时间是长是短,这些因素综合在一起导致了一个长达18个月的缓慢过程,最终以失败告终。我们可能犯了一个错误,在讨论研究过程时没有包括技术团队的成员;然而,学生团队的快速更替对这一策略构成了另一个挑战。 Fortunately, when we subsequently turned to a professional app developer the work was completed in a matter of weeks. While we were fortunate enough to engage a Master’s student from the Inclusive Design program at the Ontario College of Arts and Design as an intern to advise on graphic design and user experience for WithWomen and Pathways, a diminishing overall budget precluded allowing us to have a designer or more advanced features to these aspects of our suite. Separate funding for PROMiSE, however, allowed us to make use of a professional designer and more technical consultants, resulting in increased functionality and advanced privacy features.

结论

随着技术在卫生和社会服务护理干预和提供方面的使用变得越来越普遍,有机会开发高质量的IPV筛选应用程序并在实践中实施。该项目的目的是创建一套IPV筛查和安全规划应用程序,供当地妇女使用,以安全、谨慎的方式包含相关信息和资源。证据和用户测试反馈已经表明了女性对IPV筛查和安全规划应用程序的需求:即,产品应与用户群体相关,具有易于导航、HCD功能和谨慎访问的能力。

缩写 侠盗猎车手

大多伦多地区

HCD

以人为中心的设计

支安打

伤害、侮辱、威胁和尖叫

国际刑事法庭

组内相关系数

IPV

亲密伴侣暴力

移动健康

移动健康

承诺

在紧急情况下促进安全

这项研究得到了圣迈克尔医院基金会的慷慨捐赠。我们感谢Nancy Glass博士和Marilyn Ford-Gilboe博士为我们的基于网络的安全决策支持应用程序的创建提供的专家意见和建议。我们也感谢James Case分享关于MyPlan技术细节的信息,并为创建我们的应用程序提供建议。多伦多女子学院医院的Janice du Mont博士和Robin Mason博士对PROMiSE的开发提供了宝贵的见解和反馈。最后,我们感谢为我们的应用程序的早期版本慷慨地提供反馈的女性,特别是来自Peer2Peer的女性。Peer2Peer是一个幸存者领导的组织,旨在帮助大多伦多地区患有IPV或有IPV病史的女性。

没有宣布。

戈尔茨坦 公里 Zullig Dedert EA Alishahi大不里士 一个 Brearly 太瓦 Raitz G 萨塔 党卫军 漂白的 JD 博斯沃思 乙肝 戈登 Nagi 一个 威廉姆斯 JW Gierisch JM 为妇女设计的远程保健干预措施:证据地图 J Gen实习医生 2018 12 33 12 2191 2200 10.1007 / s11606 - 018 - 4655 - 8 30284173 10.1007 / s11606 - 018 - 4655 - 8 PMC6258612 哈达德 SM Souza RT Cecatti 移动技术在健康(mHealth)和产前护理-搜索应用程序和可用的解决方案:系统审查 国际医学资讯 2019 07 127 1 8 10.1016 / j.ijmedinf.2019.04.008 31128820 s1386 - 5056 (18) 31424 - 2 安德森 EJ 麦克勒兰德 J 迈耶克劳斯 C 克劳斯 KC 加西亚 高斯 国会议员 预防亲密伴侣暴力的网络和移动健康干预措施:一项系统审查协议 BMJ开放 2019 08 10 9 8 e029880 10.1136 / bmjopen - 2019 - 029880 31401604 bmjopen - 2019 - 029880 PMC6701589 GSM协会 2017 06 13 2021-01-15 https://www.gsma.com/newsroom/press-release/number-mobile-subscribers-worldwide-hits-5-billion/ Aryana B 布儒斯特 l 移动精神卫生设计:探索知情参与方法 卫生信息学J 2020 06 26 2 1208 1224 10.1177 / 1460458219873540 31566470 Covolo l Ceretti E Moneda 卡斯塔尔迪 年代 Gelatti U 从公共健康的角度来看,是否有证据支持使用手机应用程序作为促进健康生活方式的驱动力?随机对照试验的系统综述 病人建造清纯甜美 2017 12 One hundred. 12 2231 2243 10.1016 / j.pec.2017.07.032 28855063 s0738 - 3991 (17) 30471 - 8 自己 霍金斯 JW Fontenot H Lewis-O奥康纳 一个 筛选人际暴力的工具:科学现状 暴力战胜胜利 2011 26 6 725 37 10.1891 / 0886 - 6708.26.6.725 22288092 Eisenhut K Sauerborn E Garcia-Moreno C 野生 V 解决暴力侵害妇女行为的移动应用:系统审查 BMJ水珠健康 2020 5 4 e001954 10.1136 / bmjgh - 2019 - 001954 32399255 bmjgh - 2019 - 001954 PMC7204921 伯克 马奥尼 P Gielen 一个 麦克唐奈 O 'Campo P 为亲密伴侣暴力幸存者确定适当的改变阶段 暴力战胜胜利 2009 24 1 36 51 10.1891 / 0886 - 6708.24.1.36 19297884 Catallo C 杰克 SM Ciliska D 麦克米伦 霍奇金淋巴瘤 识别转折点:使用跨理论的变化模型来绘制急诊科环境中的亲密伴侣暴力披露情况 ISRN孕育 2012 2012 239468 10.5402 / 2012/239468 22792480 PMC3390035 Stoever 转变家庭暴力代表 肯塔基州法律期刊 2013 10 31 101 3. 483 537 10.1093 / acprof: osobl / 9780199989591.003.0017 达乌德 N 马西森 FI 需要好好 C Hamilton-Wright 年代 一个 J O 'Campo P 在遭受亲密伴侣暴力的低收入妇女中,将住房不稳定和健康不良联系起来的途径和轨迹:走向一个概念框架 女性健康 2016 56 2 208 25 10.1080 / 03630242.2015.1086465 26358378 达乌德 N 马西森 FI 需要好好 C Hamilton-Wright 年代 一个 J O 'Campo P 在遭受亲密伴侣暴力的低收入妇女中,将住房不稳定和健康不良联系起来的途径和轨迹:走向一个概念框架 女性健康 2016 56 2 208 25 10.1080 / 03630242.2015.1086465 26358378 DeKesseredy, 沃尔特 Dragiewicz 施瓦兹 虐待结局:分居和离婚暴力侵害妇女 2017 奥克兰 加州大学出版社 紫色的进化合并 2017 2019-08-21 https://www.facebook.com/PevoApp/ Soujourner和平应用 2019 2019-08-21 https://familypeacecenter.org/resources/online-resources/ 玻璃 佩兰 NA 汉森 GC 布鲁姆 TL 弄乱 JT 深谷 作为 坎贝尔 JC Gielen 交流 情况下 J 伊甸园 KB 网络安全决策援助对受虐妇女的纵向影响 我是医学预科 2017 05 52 5 606 615 10.1016 / j.amepre.2016.12.014 28108189 s0749 - 3797 (16) 30695 - x 约翰霍普金斯大学护理学院 MyPlan应用 2021 2021-01-15 https://www.myplanapp.org/ 玻璃 N 伊甸园 KB 布鲁姆 T 佩兰 N 计算机辅助改善了亲密伴侣暴力幸存者的安全决策过程 J Interpers暴力 2010 11 25 11 1947 64 10.1177 / 0886260509354508 20040709 0886260509354508 PMC3040165 Ford-Gilboe Varcoe C Scott-Storey K J 情况下 J 柯里 LM 玻璃 N 霍金斯 麦克米伦 H 佩兰 N Wathen CN 为遭受亲密伴侣暴力的妇女量身定制的在线安全和健康干预:iCAN计划4安全随机对照试验协议 BMC公共卫生 2017 03 21 17 1 273 10.1186 / s12889 - 017 - 4143 - 9 28327116 10.1186 / s12889 - 017 - 4143 - 9 PMC5360053 Ford-Gilboe Varcoe C Scott-Storey K 佩兰 N J Wathen CN 情况下 J 玻璃 N 在线安全和健康干预对遭受亲密伴侣暴力的妇女的纵向影响:随机对照试验 BMC公共卫生 2020 02 26 20. 1 260 10.1186 / s12889 - 020 - 8152 - 8 32098633 10.1186 / s12889 - 020 - 8152 - 8 PMC7043036 伊甸园 KB 佩兰 NA 汉森 GC 弄乱 JT 布鲁姆 TL 坎贝尔 JC Gielen 交流 深谷 作为 Barnes-Hoyt JS 玻璃 受虐妇女使用网络安全决策辅助:随机对照试验中对决策冲突的影响 我是医学预科 2015 04 48 4 372 83 10.1016 / j.amepre.2014.09.027 25547929 s0749 - 3797 (14) 00564 - 9 PMC4380709 赫加蒂 K Tarzia l 穆雷 E Valpied J 汉弗莱斯 C 塔夫脱 一个 黄金 l 玻璃 N 为遭受家庭暴力的妇女提供基于网络的健康关系工具和安全决策援助的随机对照试验方案(I-DECIDE) BMC公共卫生 2015 08 01 15 736 10.1186 / s12889 - 015 - 2072 - z 26231225 10.1186 / s12889 - 015 - 2072 - z PMC4522060 Koziol-McLain 汪达尔人 交流 威尔逊 D Nada-Raja 年代 多布斯 T 麦克莱恩 C Sisk R 伊甸园 凯伦B 玻璃 南希·E 基于网络的安全决策援助对遭受亲密伴侣暴力的妇女的有效性:随机对照试验 J医学网络杂志 2018 01 10 19 12 e426 10.2196 / jmir.8617 29321125 v19i12e426 PMC6858022 国际标准化组织 人-系统交互工效学。第210部分:交互系统以人为中心的设计 ISO标准目录 2010 2021-12-07 https://www.iso.org/standard/52075.html Martinez-Perez B 线性时不变 Candelas-Plasencia 年代 Lopez-Coronado 开发和评估衡量移动医疗应用中体验质量(QoE)的工具 J医疗系统 2013 10 37 5 9976 10.1007 / s10916 - 013 - 9976 - x 24014255 哈特 R 昆兰 LR 格林 l Rodriguez-Molinero 亚历杭德罗 贝克 Scharf T OLaighin Gearoid 以人为本的设计研究:在一个综合跌倒风险检测系统中增强手机应用程序的可用性,供老年用户使用 JMIR Mhealth Uhealth 2017 05 30. 5 5 e71 10.2196 / mhealth.7046 28559227 v5i5e71 PMC5470007 拉宾 射频 詹宁斯 JM 坎贝尔 JC Bair-Merritt MH 亲密伴侣暴力筛查工具:系统综述 我是医学预科 2009 05 36 5 439 e4 445. 10.1016 / j.amepre.2009.01.024 19362697 s0749 - 3797 (09) 00090 - 7 PMC2688958 Spangaro J Vajda J 克兰伯格坚持 E 年代 格里菲思 C 萨贝里 E E 米勒 一个 麦克纳马拉 l 新南威尔士州急诊科的亲密伴侣暴力筛查和应对:一项多地点可行性研究 紧急情况地中海Australas 2020 08 32 4 548 555 10.1111 / 1742 - 6723.13452 31965691 P Rovi 年代 华盛顿 J 雅可布 一个 维加 K 约翰逊 女士 三种家庭实践中家庭暴力筛查方法的随机比较 安Fam地中海 2007 5 5 430 5 10.1370 / afm.716 17893385 5/5/430 PMC2000304 C Y 非盟 一个 G “扩展-伤害、侮辱、威胁、尖叫”(E-Hits)筛选工具在香港医院急诊科检测亲密伴侣暴力行为的信度和效度 香港急救医学杂志 2017 12 11 17 2 109 117 10.1177 / 102490791001700202 谢林 公里 Sinacore JM XQ 青春痘 再保险 Shakil 一个 HITS:一个简短的家庭暴力筛查工具,用于家庭实践环境 Fam地中海 1998 30. 7 508 12 9669164 柯林斯 D 前测调查工具:认知方法概述 质量生活Res 2003 05 12 3. 229 38 10.1023 /: 1023254226592 12769135 Wolford-Clevenger C Kuhlman 年代 埃里奇那本怀特 信用证 史密斯 PN 斯图尔特 GL 自杀行为暴露量表的初步验证 Psychol暴力 2019 07 9 4 442 450 10.1037 / vio0000170 31934496 PMC6956861 Buel 年代 离开的50个障碍,也就是女人留下的原因 科罗拉多的律师 1999 28 10 19 28 Tactica国际 2021-01-15 https://tactica.ca/?doing_wp_cron=1629130143.1195750236511230468750 Jewkes R 亲密伴侣暴力:原因和预防 《柳叶刀》 2002 04 20. 359 9315 1423 9 10.1016 / s0140 - 6736 (02) 08357 - 5 11978358 s0140 - 6736 (02) 08357 - 5 Godin 随着世界各地的城市实行封锁,家庭暴力受害者在寻找出路 《时代》杂志 2020 2021-01-14 纽约,纽约 时间的美国公司 https://time.com/5803887/coronavirus-domestic-violence-victims/ Dubinski K Margison 一个 全国调查发现,疫情期间的家庭暴力更加频繁和严重 加拿大广播公司 2020 08 25 2021-01-15 https://www.cbc.ca/news/canada/london/national-survey-domestic-violence-end-violence-now-anova-1.5698028 马西森 FI 达乌德 N Hamilton-Wright 年代 伯伦斯坦 H 需要好好 C O 'Campo P 她去哪儿了?经历过亲密伴侣暴力的女性的自尊、自我认同和心理健康的转变 女性健康问题 2015 25 5 561 9 10.1016 / j.whi.2015.04.006 26116987 s1049 - 3867 (15) 00059 - 6 Brosi 滚动 E C Kitch B 超越韧性:一瞥女性在经历亲密伴侣暴力后的创伤后成长 美国家庭治疗杂志 2019 11 25 48 1 1 15 10.1080 / 01926187.2019.1691084 安德森 公里 LM Danis FS 恢复:家庭暴力后的恢复力和成长 针对妇女的暴力行为 2012 11 18 11 1279 99 10.1177 / 1077801212470543 23334815 18/11/1279 Lim 必和必拓 瓦尔迪兹 CE 礼来公司 毫米 从人际受害中寻找意义:IPV幸存者的叙述 针对妇女的暴力行为 2015 09 21 9 1065 86 10.1177 / 1077801215590670 26091685 1077801215590670 Ulloa 电子商务 哈梅特 摩根富林明 古斯曼 毫升 Hokoda 一个 亲密伴侣暴力的心理成长研究进展 攻击性和暴力行为 2015 11 25 88 94 10.1016 / j.avb.2015.07.007 Velonis AJ O 'Campo P 罗德里格斯 JJ Buhariwala P 应用实施科学建立骨折门诊亲密伴侣暴力筛查和转诊能力 评价临床实践 2019 06 25 3. 381 389 10.1111 / jep.13128 30932286 O 'Campo P Mutaner C Metheny N Yakubovich 一个 改进社会科学研究实验设计:对单一案例实验设计进行改进。社会科学及人文科学研究委员会资助 加拿大社会科学和人文科学研究理事会 2019 2021-01-09 https://maphealth.ca/sced-evaluation/
Baidu
map