JFR
JMIR表格
形成性研究
2561 - 326 x
卡塔尔世界杯8强波胆分析
加拿大多伦多
v5i4e19022
33825686
10.2196/19022
原始论文
原始论文
Facebook广告管理器作为农场母亲健康和安全调查的招聘工具:试点研究
Eysenbach
冈瑟
巴拉米
穆罕默德·阿明
达席尔瓦
埃德森
Shubina
Ivanna
Kanzow
菲利普
伯克
理查德·R
英里每小时
1
国家农场医学中心
马什菲尔德诊所研究所
北橡树大道1000号
马什菲尔德,威斯康星州,54449
美国
1 715 389 3789
burke.richard@marshfieldresearch.org
https://orcid.org/0000-0003-2366-4013
Weichelt
布莱恩·P
工商管理硕士,博士
1
https://orcid.org/0000-0001-7444-4374
Namkoong
康
博士学位
2
https://orcid.org/0000-0002-2246-6210
1
国家农场医学中心
马什菲尔德诊所研究所
, WI
美国
2
交通部
马里兰大学
马里兰大学帕克
美国
通讯作者:Richard R Burke
burke.richard@marshfieldresearch.org
4
2021
7
4
2021
5
4
e19022
1
4
2020
18
9
2020
11
12
2020
17
1
2021
©Richard R Burke, Bryan P Weichelt, Kang Namkoong。最初发表于JMIR Formative Research (http://formative.www.mybigtv.com), 2021年4月7日。
2021
这是一篇在知识共享署名许可(https://creativecommons.org/licenses/by/4.0/)条款下发布的开放获取文章,该许可允许在任何媒体上不受限制地使用、分发和复制,前提是原始作品首次发表在JMIR Formative Research上,并适当引用。必须包括完整的书目信息,到http://formative.www.mybigtv.com上原始出版物的链接,以及版权和许可信息。
背景
在过去的十年里,社交媒体平台经历了前所未有的增长和使用水平,Facebook在全球拥有27亿活跃用户,其中包括2亿多美国用户。Facebook用户作为一种招募参与者的资源,一直没有被学术界充分利用和研究。
客观的
我们进行了一项试点研究,以探索Facebook广告招聘在线农业健康和安全调查的功效和成本效益。
方法
我们利用Facebook Ads Manager的整合定向广告平台开展了为期一周的广告活动,目标支出限制为294美元。我们制作并发布了三个广告,描述了不同程度的农业安全采用情况,从而对农场人口统计和安全态度进行了简短的调查。我们的广告目标是美国21-50岁的农场母亲,并确定了成本效益和潜在的偏见。没有提供参与者奖励。
结果
我们达到了40024个用户,收集了318次广告点击。二十九名参加者同意调查,共填写了二十四份表格。包括人事费用在内,每次完成调查的费用为17.42美元。与美国女性制片人的分布相比,我们的广告在美国东部出人意料地多,而在美国西部却少。
结论
Facebook Ads Manager代表了一种潜在的成本效益和及时的方法,可以在针对特定人群时招募参与者进行在线健康和安全研究。然而,社交媒体招聘反映了传统招聘方法的局限性,表现出需要解决的地理、反应和自我选择偏见。
脸谱网
招聘
广告
农业
健康
安全
调查
在线
介绍
研究人员在招募参与者方面面临着一系列问题,包括回复率下降以及通过电话和纸张等传统模式联系参与者的难度增加[
1 -
3. ]。这些挑战又与招聘成本的增加有关。随着社交媒体的增加和我们的沟通策略的转变,研究人员越来越多地关注这些系统,以寻找潜在的招聘机会,以应对当前的挑战。
Facebook是最大的社交媒体平台,日活跃用户超过18亿,月活跃用户27亿。
4 ]。其中,超过2亿用户在美国。如此高的用户比例使得Facebook广告能够在短时间内接触到潜在的研究参与者。截至2019年,高达90%的美国成年人使用互联网,这一数字一直在稳步增长。
5 ]。此外,虽然24%的美国人在家中没有互联网连接,但17%的美国成年人在家中使用智能手机而没有互联网连接,从而增加了基于互联网的研究的可行性[
6 ]。
招聘的最大障碍之一是成本。邮寄调查费用分布相对均匀,从6.51美元到30.24美元不等;然而,这包括高昂的人事成本[
7 -
9 ]。据观察,电话调查的费用从每位参与者29美元到99美元不等,也需要很高的人事费用[
10 ,
11 ]。一些在线健康和行为研究报告的费用低至每位参与者0.64美元,而其他研究报告的费用高达每位参与者33美元;然而,中位数成本往往倾向于天平的低端[
12 -
15 ]。
电话和邮寄调查都需要预先存在的信息来达到目标人群,而Facebook的集成广告管理器利用其内部用户数据来确定此类人口统计数据。然而,这种广泛的目标引起了对多重偏见的进一步关注[
13 ,
16 ]。尽管在农业人口中使用和评估了更传统的招聘方法,结果往往好坏参半,但我们对文献的回顾表明,关于使用Facebook或其他社交媒体平台进行招聘的数据报道很少[
17 -
21 ]。因此,我们进行了这项试点研究,以调查Facebook上的定向广告作为招募农业部门参与者的工具的有效性,并评估这种抽样方法中可能存在的自我选择和地理偏差。
方法
为了确定Facebook广告在农业健康和安全调查中的可行性和成本效益,我们开展了一个由三个独立广告组成的广告活动,每个广告都有不同的农业形象。该活动于2020年3月9日至3月16日在Facebook上进行,总成本为294美元,在三个广告中平均分配。图像的选择是基于显示的明显安全采用,以确定广告图像是否影响性能。这包括低(翻倒拖拉机),中性(喂小牛的孩子)和高(带着全套个人防护装备打扫谷仓的妇女)安全收养(见
多媒体附录 -
3. 例如广告图像)。这些广告同时在全国农村和农业健康与安全儿童中心的Facebook页面上播放。我们调查了每次点击的成本,每个参与者的成本,以及在这个活动中出现的潜在地理偏差。
我们选择了以下纳入标准来定位我们的广告:目前居住在美国的个人,确定为女性,年龄在21-50岁之间,并且在Facebook定义的农业,渔业或林业(FFF)中有“角色”;由Facebook划分为人口统计>工作>行业> FFF)。Facebook根据这些标准报告了17万名符合条件的用户。该活动将点击广告的用户引导到redcap托管的在线同意文件,该文件概述了一项新颖的开放的10项调查,评估农场家庭人口统计数据,对儿童农业安全的看法,以及对他们所展示的Facebook广告的开放式反馈。
22 ,
23 ]。本调查是为评估相关新闻媒体对农场母亲对儿童农业安全的知识、态度和行为意图的影响而设计的。没有为参与提供财政奖励。本研究的调查工具、同意书和方案不受Marshfield临床研究所机构审查委员会的审查。
我们通过将Facebook的广告定位系统性能与基于州一级女性制作人数量的预期分布进行比较,调查了广告的地理分布[
24 ]。然后,我们绘制了广告预期到达率与实际到达率的比值。
结果
在这一周的时间里,广告活动的总覆盖范围(以浏览量衡量)是40024,318个用户点击了其中一个广告,点击率为0.79% (
表1 ).在318名参观者中,29人同意调查,参与率为9.1%;24人完全完成调查,完成率为83%。这将产生0.06%的总点击率和7.5%的总点击率。这项研究的每次点击总成本为0.92美元,而每位参与者的成本为10.14美元。考虑到17%的辍学率(完成调查的参与者与同意调查的参与者)和4小时的总人力成本为每小时31美元,每次完成调查的总成本为17.42美元。
描绘一个孩子喂小牛的中性广告获得了最多的点击量,在318次总点击量中占122次(38.4%)。然而,年轻女子扫谷仓的图片点击率最高,为0.84% (
表1 ).
东部各州的广告比预期的要多,而西部各州(不包括加州、内华达州和犹他州)的广告比例往往高于女性制片人的比例(
图1 ).三种广告图像在地理分布上没有明显差异。
表1
广告图片的到达率和点击率。
广告形象
达到(N)
点击率,n (%)
推翻了拖拉机
14240年
102 (0.72)
喂奶小牛
14652年
122 (0.83)
女人彻底
11132年
94 (0.84)
总计
40024年
318 (0.79)
图1
观察到的Facebook广告地理分布与预期的比例。数据来自美国国家农业统计局2017年农业普查。
讨论
主要研究结果
这个试点项目旨在确定Facebook Ads Manager是否可以成为一个有用的工具,用于招募农业人口样本进行在线健康和安全调查。美国目前对Facebook和其他社交媒体的采用,以及互联网接入率的提高,表明未来的研究有可能部分或全部在网上进行。
我们以294美元的成本接触了4万多名Facebook用户,每次完成调查的总成本为17.42美元。这与其他观察到的在线健康和行为研究的费用相当,费用在0.64美元至33美元之间;然而,我们无法确定任何已发表的研究使用Facebook Ads Manager来招募农业人口,如农民,牧场主,农场或牧场父母,或农场工人。
12 -
15 ]。应该注意的是,当广告接近研究的总抽样框架时,目标人群中有达到饱和的风险,这意味着个人将多次显示相同的广告。需要进一步的研究来确定,当招募更大的样本量并向同一个人多次展示同一条广告时,是否存在收益递减(如果有的话)。
限制
这项初步研究有几个局限性。首先,我们的研究拥有非常小的最终回应率,即基于总访问量(N= 4024)的0.06%和基于总点击量(N=318)的7.5%。Facebook和其他在线招聘方式可以以相对较低的成本实现高可扩展性。然而,由于如此低的回复率,其他更大的样本有可能在目标人群中达到饱和水平,从而导致广告向潜在参与者多次展示。
此外,这项研究还显示出一定程度的地理偏差,这是由Facebook Ads Manager平台通过算法决定的。与居住在这些州的预期目标人口相比,多个州的Facebook用户看到的广告数量不成比例地多或少。尽管在线研究可以方便地获得国家和国际样本,但偏倚风险仍然突出,应采取适当措施来调整或解释这些差异(例如,数据加权、分层、配额抽样)。
我们没有提供或支付任何参与的财政奖励。虽然我们有318次访问,但只有29人同意参与,24人完全完成了调查。我们也无法准确测量每个广告图像的响应率和完成率。未来的研究应确保调查基础设施的建立,以衡量和评估这些潜在的差异。该活动通过NCCRAHS Facebook页面进行管理,该页面随后作为主办机构广告出现,并可能影响受访者参与广告的程度,进而影响点击率和完成率。提供补偿有助于提高参与率和完成率;但是,应当采取措施控制这种措施可能带来的额外的自我选择偏差。
值得注意的是,我们无法完全控制或了解Facebook的定向广告机制。根据Facebook的数据,女性扫地广告的覆盖率低于其他图片,但点击率最高。此外,Facebook报告称,有17万名年龄在21-50岁之间的女性在FFF中发挥了作用。美国国家农业统计局2017年人口普查估计,美国有超过50万名年龄在21至50岁之间的女性农业生产者;这并不包括农场工人或其配偶从事农业工作的妇女[
24 ]。
未来的工作
我们主张进行更多的研究,以利用这些相对未充分利用的资源,同时采取足够的措施来控制地理和反应偏差,以及虚假陈述和数据有效性。未来的研究应包括数据加权,验证类似问题的一致回答,以及“内幕知识”问题[
25 ,
26 ]。更深入的研究和分析可以深入了解将这些方法应用于在线调查研究的其他方法,以及这些方法对农业人口可能有何不同。
结论
我们成功地利用Facebook Ads Manager在短时间内招募了一批农业人口样本进行在线健康和安全调查。我们观察到低回复率,这被大量广告覆盖所抵消。这种方法与传统的调查招聘方法有许多局限性,需要适当的措施来限制潜在的偏见。未来的研究需要确定Facebook广告经理在招聘大量农业人口的有效性,如果这种方法是可持续的。
多媒体附录1
低安全性领养广告预览。
多媒体附录2
中性安全收养广告预览。
多媒体附录3
高安全性领养广告预览。
缩写
FFF
农业、渔业和林业
NCCRAHS
国家农村和农业健康与安全儿童中心
作者要感谢国家农场医学中心的Florence Becot博士在审阅本文时的帮助。资金由国家农场医学中心、马什菲尔德诊所研究所和国家儿童农村和农业健康与安全中心通过CDC/NIOSH提供(资助号U54OH009568-11-00)。
所有作者都参与了作品的构思或设计;为工作获取、分析或解释数据;起草工作,并对重要的知识内容进行批判性修改;提交/出版版本的最终批准;所有人都同意对工作的各个方面负责,以确保与工作任何部分的准确性或完整性有关的问题得到适当的调查和解决。
没有宣布。
[
]1
肯尼迪
C
Hartig
H
电话调查的回复率已恢复下降趋势
皮尤研究中心
2020
2020-12-08
https://www.pewresearch.org/fact-tank/2019/02/27/response-rates-in-telephone-surveys-have-resumed-their-decline/
[
]2
Stedman
钢筋混凝土
康纳利
NA
Heberlein
助教
德克尔
DJ
奥尔雷德
某人
我们所知的(研究)世界的终结?了解和处理邮件调查的回复率下降
Soc Nat资源
2019
03
29
32
10
1139
1154
10.1080 / 08941920.2019.1587127
[
]3.
Czajka
J
贝利
一个
联邦调查中回复率的下降:趋势和影响
Mathematica政策研究报告
2016
06
15
2020-12-08
https://aspe.hhs.gov/system/files/pdf/255531/Decliningresponserates.pdf
[
]4
Facebook IQ Insights to Go
商业Facebook
2020
2020-11-18
https://www.facebook.com/iq/insights-to-go/
[
]5
10%的美国人不上网
皮尤研究中心事实库
2019
2020-03-23
https://www.pewresearch.org/fact-tank/2019/04/22/some-americans-dont-use-the-internet-who-are-they/
[
]6
美国互联网和家庭宽带使用的人口统计数据
皮尤研究中心互联网与技术
2019
2020-03-23
https://www.pewresearch.org/internet/fact-sheet/internet-broadband/
[
]7
辛克莱
米
奥图尔
J
Malawaraarachchi
米
分类账
K
比较以社区为基础的调查的回应率和成本效益:邮政、互联网和电话模式与通用或个性化招聘方法
BMC医学研究方法
2012
08
31
12
132
10.1186 / 1471-2288-12-132
22938205
1471-2288-12-132
PMC3502082
[
]8
哈迪
个人电脑
Succar
CT
弗莱
JM
执业牙医邮件和网络调查的回复率和经济成本分析:一项随机试验
J社区卫生
2012
04
37
2
383
394
10.1007 / s10900 - 011 - 9455 - 6
21858591
[
]9
威廉姆斯
D
爱德华兹
W
Giambo
P
Kena
G
成本效益的邮件调查设计
2018
3.
联邦统计方法研究委员会会议
2018年3月7日至9日
华盛顿特区
[
]10
Potoglou
D
电话调查与网络调查在被调查者招募中的比较证据
开放运输J
2012
03
22
6
1
11
22
10.2174 / 1874447801206010011
[
]11
邓肯
SC
Strycker
拉
邓肯
TE
Chaumeton
NR
电话招募随机分层青年样本进行体育活动研究
J体育运动心理
2004
08
01
18
3.
353
368
10.1016 / j.jaging.2004.03.001
19633736
PMC2714917
[
]12
雷默
德
Prochaska
JJ
广泛的覆盖面和有针对性的招募,使用Facebook进行年轻人药物使用的在线调查
J Med Internet Res
2012
02
23
14
1
e28
10.2196 / jmir.1878
22360969
v14i1e28
PMC3374532
[
]13
辛斯
米
Matz
SC
高斯林
SD
波波夫
V
史迪威将军
D
Facebook作为社会科学的研究工具:机遇、挑战、伦理考虑和实践指南
我Psychol
2015
09
70
6
543
556
10.1037 / a0039210
26348336
2015-39598-005
[
]14
格林鲁
C
Brown-Welty
年代
基于网络和纸质调查方法的比较:检验调查模式和回应成本的假设
Eval牧师
2009
10
33
5
464
480
10.1177 / 0193841 x09340214
19605623
0193841 x09340214
[
]15
李
年代
托罗
米
笔挺
F
陈
N
McGillivray
l
伯内特
一个
拉森
我
Mok
K
Facebook招聘对自杀预防研究的绩效、成本效益和代表性:在线调查研究
JMIR健康
2020
10
22
7
10
e18762
10.2196/18762
33090115
v7i10e18762
PMC7644381
[
]16
Facebook广告管理
商业Facebook
2021
2020-03-31
https://www.facebook.com/business/tools/ads-manager
[
]17
魏盖尔
C
保罗
拉
费拉罗
PJ
梅塞尔集团
KD
招募美国农民进行与政策相关的经济实地试验的挑战
苹果经济前景政策
2020
09
28
印刷前在线
10.1002 / aepp.13066
[
]18
格拉斯
泽
Getson
JM
高
Y
辛格
作为
ean
FR
Esman
拉
大疱
BR
Prokopy
LS
金钱激励对中西部农民邮件调查回复率的影响
Soc Nat资源
2018
11
20.
32
2
229
237
10.1080 / 08941920.2018.1530815
[
]19
沃兰德
年代
费拉罗
P
希金斯
N
解决联邦计划中参与者注意力不集中的问题:保护区计划的实地实验
农业经济吗
2017
04
19
99
4
914
931
10.1093 / ajae / aax023
[
]20.
Buse
钢筋混凝土
提高邮寄问卷的回复率
农业经济吗
1973
08
55
3.
503
508
10.2307 / 1239134
[
]21
斯文森
一个
Ploeckelman
米
Salzwedel
米
Weichelt
B
评估Facebook广告作为面对面研讨会的招聘策略
J Agromed
2020
12
06
25
3.
261
262
10.1080 / 1059924 x.2020.1765614
[
]22
哈里斯
巴勒斯坦权力机构
泰勒
R
Thielke
R
佩恩
J
冈萨雷斯
N
康德
詹
研究电子数据捕获(REDCap)——提供转化研究信息学支持的元数据驱动方法和工作流程
J生物医学信息
2009
04
42
2
377
381
10.1016 / j.jbi.2008.08.010
18929686
s1532 - 0464 (08) 00122 - 6
PMC2700030
[
]23
哈里斯
巴勒斯坦权力机构
泰勒
R
小
提单
艾略特
V
费尔南德斯
米
奥尼尔
l
麦克劳德
l
Delacqua
G
Delacqua
F
科比
J
杜达
SN
搬运工财团
REDCap联盟:建立一个国际软件平台合作伙伴社区
J生物医学信息
2019
07
95
103208
10.1016 / j.jbi.2019.103208
31078660
s1532 - 0464 (19) 30126 - 1
PMC7254481
[
]24
2017年农业普查
美国农业部国家农业统计局
2017
2020-03-27
https://www.nass.usda.gov/AgCensus
[
]25
克莱默
J
鲁宾
一个
水果贩
W
赫尔穆特
E
Hermos
J
罗
D
物后
R
杜利
米
花王
Y
Liljenquist
K
短暂的
D
Enggasser
J
基恩
T
罗伊
米
Lachowicz
米
解决参与者在网络研究中的资格错误陈述的策略
精神病学杂志
2014
03
23
1
120
129
10.1002 / mpr.1415
24431134
PMC4070377
[
]26
需要好好
呃
Kurz
J
使用Facebook进行与健康相关的研究招募和项目交付
当前精神病学
2016
05
9
38
43
10.1016 / j.copsyc.2015.09.011
26726313
PMC4697271