这是一篇开放获取的文章,根据创作共用署名许可(https://creativecommons.org/licenses/by/4.0/)的条款发布,允许在任何媒介上无限制地使用、分发和复制,前提是正确引用最初发表在《医学互联网研究杂志》上的原创作品。必须包括完整的书目信息,//www.mybigtv.com/上的原始出版物的链接,以及此版权和许可信息。
越来越多地使用在线调查来提高数据质量和及时性并降低成本。虽然有大量的横断面研究比较了在线调查或纸质调查的反应,但从纵向角度进行的研究很少。
在完善的澳大利亚妇女健康纵向研究的背景下,我们检查了前两波研究中两种模式都提供的在线或纸质调查的反应模式。我们比较了以下数据:1946年至1951年和1973年至1978年出生的女性之间的差异;用于在线完井的设备类型;在线或使用邮寄问卷调查的女性的社会人口学、行为和健康特征;第一次调查的完成模式与第二次调查的参与和完成模式之间的联系。
这项研究的参与者自1996年以来定期接受邮寄调查,从2012年开始,他们可以选择使用纸质问卷或基于网络的电子问卷完成调查。参与调查的女性有两组:一组年龄较大,出生于1946年至1951年,年龄在60多岁;另一组年龄较小,出生于1973年至1978年,年龄在30多岁,当时在线调查首次引入。我们比较了在两次调查中都在线回答的女性,在第一次调查中在线回答并使用纸质版本的女性,在第二次调查中使用纸质版本的女性,在两次调查中都使用纸质版本的女性。
在对一项或两项调查都做出回应的9663名60多岁女性中,超过50%的人更喜欢纸质调查(第一次调查的5290/9663占54.74%,第二次调查的5373/8621占62.32%)。如果他们选择在线版本,大多数人使用电脑。相反,在第一次调查中,8628名30多岁的女性中,56.04%(4835/8628)的人选择了在线版。在随后的调查中,虽然大多数人更喜欢电脑而不是手机或平板电脑,但也有很多人尝试过这些替代品。许多第一次在网上完成调查的女性在随后的调查中更喜欢纸质版本。事实上,在60多岁的女性中,从网上转向纸质报纸的人数(1151/3851,29.89%)超过了从纸质报纸转向在线的人数(734/5290,13.88%)。受教育程度更高、更健康的女性更有可能选择在线治疗。在这两个队列中,完成纸质调查的女性比完成在线调查的女性更有可能在下一次调查中成为非受访者。由于样本量大,几乎所有的差异都有统计学意义
尽管与纸质调查相比,在线调查具有节省成本的优势,但纸质调查可能会吸引不同的潜在受访者群体,他们具有不同的社会人口学、行为和健康特征,并且更有可能从研究中流失。因此,不提供纸质版本很可能会导致应答分布的偏差,除非采用了对应答者特征(相对于目标人群)的加权。因此,如果混合模式(纸质或在线)选择是可行的,它们很可能产生比仅提供成本较低的在线选择更有代表性的结果。
越来越多地使用在线调查进行研究,以提高参与度;改进数据的完整性、质量和可用性;降低成本[
研究人员通常发现,更年轻、受教育程度更高的参与者更喜欢基于互联网的完成模式。
虽然混合数据收集模式具有优势,但允许参与者切换问卷完成模式有可能改变总体和部分回应率,改变被评估样本的代表性,并改变参与者对特定问题的回应方式[
到2012-2013年,大多数澳大利亚家庭都有互联网接入,从首都城市的85%到农村地区的79%不等。
1946 - 1951年出生的女性和1973 - 1978年出生的女性
按用于在线完成的设备类型
通过在线或使用邮寄纸质调查的女性的社会人口统计学、行为和健康特征进行调查
第一次调查的完成模式与第二次调查的参与和完成模式之间
根据调查绩效标准,包括回复率、未完成(中断)、遗漏项目的回复和测量等效性。
1996年,在1921年至1926年、1946年至1951年和1973年至1978年出生的三个年龄段的妇女被招募到澳大利亚妇女健康纵向研究中,每个队列中有超过1.2万名参与者参与了基线调查。抽样框架是全民健康保险计划(现在称为医疗保险)的数据库,该计划覆盖所有公民和永久居民。生活在农村和偏远地区的妇女按人口比例的两倍招募,以确保有足够的能力发现健康和使用服务方面的重要差异。研究招募、国家代表性、减员和测量方法的细节已在其他地方发表[
自1996年基线调查以来,这些妇女大约每三年重新接受一次调查。最初,研究人员将纸质问卷和付费回复信封邮寄给参与者。这些调查有许多共同项目,但都是为解决与每个队列和时间相关的健康和卫生服务问题而量身定制的。
从2012年的第6项调查开始,1973-1978年队列中的女性可以选择在线完成问卷,使用专为手机、平板电脑和电脑设计的版本。从2013年的第7项调查来看,1946年至1951年的人群也有同样的选择。此后,两个队列都完成了另一项调查,使我们能够观察完成模式的变化以及完成模式与后续调查反应之间的联系。
在每次调查中,我们都邀请以前没有退出研究或死亡,并且我们有目前联系方式的女性参与。自2012年以来,我们通过电子邮件向拥有电子邮件地址的女性发送了邀请和在线调查的链接。如果他们在4到6周后还没有回复,在此期间他们会收到电子邮件、邮件和短信提醒,然后会邮寄纸质调查(随后会对没有回复的人发出电子邮件、短信和电话提醒)。对于目前没有电子邮件地址的女性,我们一开始会向她们邮寄邀请和在线调查的链接(随后是邮寄或短信提醒)。如果他们在4到6周内没有完成在线调查,他们会被邮寄纸质调查(并使用与另一组相同的提醒协议进行跟踪)。
当在线调查被引入时,纸质版本被重新格式化,以提高问卷的等效性。例如,可以放在一页纸上但在一个屏幕上可能放不下的长列表被分解成更短的列表,每个列表都有相同的说明。此外,还采取了一些措施使在线调查适用于移动设备。调查问题的最大像素宽度受限。带有大量回答选项的问题项列表占据了很大的宽度,这些问题项被转换为宽度减小的单个项目,在移动设备屏幕上使用更多的滚动。问题响应控件(单选按钮、复选框、按钮等)的大小增加了,以实现更精确的触摸屏交互。
参与者用来在线完成调查的设备由浏览器的用户代理字符串的文本确定。用户代理记录正在使用的浏览器和操作系统。这些信息是由用于调查的在线平台提供的。如果用户代理字符串包含术语iPhone、iPad或Android,则设备被归类为tablet/phone。如果出现“Windows”、“Macintosh”或“Linux”等术语,则该设备被归类为计算机。如果用户代理字符串不包含任何标识的单词,则认为设备类型缺失。
居住地区是根据妇女居住地与具有不同服务水平(保健、教育、商店等)的人口中心之间的距离来衡量的[
根据吸烟的问题,女性被分为从不吸烟、曾经吸烟和现在吸烟。酒精消耗量是根据有关饮酒频率和数量的问题计算出来的,并根据国家指南将其分为不饮酒者、低风险饮酒者或很少饮酒者,以及风险饮酒者[
为了比较使用两项调查的完成模式,使用了匹配的交叉表和边际同质性检验(斯图亚特-麦克斯韦检验)和对称性。为了研究保持相同完成模式的女性与改变完成模式的女性的特征,定义了四组:两次都在线,在线后纸,纸后在线,两次都是纸。为了评估完成模式的变化对趋势估计的影响,我们计算了同一个人在引入在线选项之前的两次连续调查之间以及在引入在线选项之前的调查与调查之间的响应变化。对四组妇女之间的差异进行分类变量卡方检验和连续变量单向方差分析(ANOVA)和Tukey检验,以确定哪些组在统计学上有显著差异。
在1946年至1951年的队列中,共有9663名女性回答了第7或第8项调查。在第7项调查中,我们无法识别26名在线完成调查的人使用的设备;对于剩余的9637,完成模式和无响应模式如图所示
澳大利亚妇女健康纵向研究1946-1951年队列中2013年调查7和2016年调查8的完成方式比较
调查8 | |||||
调查7 | 电脑 | 平板电脑/手机 | 纸 | Nonresponse | 总计 |
电脑 | 1772 (51.80) | 369 (10.79) | 1022 (29.87) | 258 (7.54) | 3421 (100) |
平板电脑/手机 | 79 (19.08) | 184 (44.44) | 123 (29.71) | 28日(6.76) | 414 (100) |
纸 | 533 (10.08) | 201 (3.80) | 3800 (71.83) | 756 (14.29) | 5290 (100) |
Nonresponse | 60 (12.72) | 24 (4.69) | 428 (83.59) | - - - - - - | 512 (100) |
总计 | 2444 (25.36) | 778 (8.07) | 5373 (55.75) | 1042 (10.81) | 9637 (100) |
比较了1946-1951年四个主要群体中妇女的特征
在1973年至1978年出生的女性中,有8628人完成了一项或两项调查。对于10个在线应答者,我们无法识别他们使用的设备,但对于其余的完成和无应答模式显示在
根据调查完成模式,对澳大利亚妇女健康纵向研究1946-1951年队列中回答2013年调查7和2016年调查8的妇女(N=8109)进行比较。
特征 | 在线/在线(n = 2424a、b), n (%) | 在线/纸(n = 1151c、b), n (%) | 论文/在线(n = 734b), n (%) | 纸/纸(n = 3800b), n (%) | |
|
|
|
|
|
|
|
主要城市 | 1055 (44.03) | 456 (39.93) | 317 (43.37) | 1314 (34.84) |
|
内部区域 | 898 (37.48) | 461 (40.37) | 283 (38.71) | 1572 (41.69) |
|
外区域 | 396 (16.53) | 195 (17.08) | 118 (16.14) | 794 (21.06) |
|
远程/非常遥远 | 47 (1.96) | 30 (2.63) | 13 (1.78) | 91 (2.41) |
|
|
|
|
|
|
|
学校学历及以下 | 572 (25.05) | 336 (31.26) | 193 (28.34) | 1620 (47.07) |
|
高等学历 | 426 (18.66) | 208 (19.35) | 121 (17.77) | 695 (20.19) |
|
贸易证书/文凭 | 545 (23.87) | 265 (24.65) | 182 (26.73) | 664 (19.29) |
|
大学学位 | 740 (32.41) | 266 (24.74) | 185 (27.17) | 463 (13.45) |
|
|
|
|
|
|
|
合作 | 1825 (75.63) | 925 (81.07) | 534 (73.25) | 2774 (73.48) |
|
没有人陪伴 | 588 (24.37) | 216 (18.93) | 195 (26.75) | 1001 (26.52) |
|
|
|
|
|
|
|
全职 | 370 (15.33) | 200 (17.53) | 143 (19.51) | 504 (13.37) |
|
兼职 | 791 (32.77) | 354 (31.03) | 248 (33.83) | 1045 (27.72) |
|
不工作 | 1253 (51.91) | 587 (51.45) | 342 (46.66) | 2221 (58.91) |
|
|
|
|
|
|
|
不吸烟 | 1496 (61.95) | 728 (63.80) | 494 (67.49) | 2401 (63.60) |
|
他以前吸烟 | 824 (34.12) | 372 (32.60) | 213 (29.10) | 1053 (27.89) |
|
当前吸烟者 | 95 (3.93) | 41 (3.59) | 25 (3.42) | 321 (8.50) |
|
|
|
|
|
|
|
Nondrinker | 244 (10.10) | 123 (10.76) | 90 (12.31) | 797 (21.32) |
|
低风险/很少喝 | 1997 (82.66) | 962 (84.16) | 600 (82.08) | 2732 (73.09) |
|
危险的酒鬼 | 175 (7.24) | 58 (5.07) | 41 (5.61) | 209 (5.59) |
|
|
|
|
|
|
|
好/很好 | 1441 (59.50) | 619 (53.87) | 363 (49.52) | 1512 (39.89) |
|
好 | 782 (32.29) | 415 (36.12) | 297 (40.52) | 1659 (43.77) |
|
公平/可怜 | 199 (8.22) | 115 (10.01) | 73 (9.96) | 619 (16.33) |
一个有20名女性在网上回答了这两项调查,但她们没有被包括在调查中
b并不是所有女性都对每一项都做出了回应。
c有6名女性在网上回答了第7项调查,并在第8项调查中使用了纸张,她们没有被包括在内
比较调查1(1996年)、6(2010年)、7(2013年)和8(2016年)的措施,这些措施来自澳大利亚妇女健康纵向研究1946-1951年队列中的妇女,根据她们的调查完成模式,对调查7和8做出了回应。
特征 | 在线/在线(n = 2424) | 在线/纸(n = 1151) | 论文/在线(n = 73) | 纸/纸(n = 3800) |
|
|
调查1时的平均年龄 | 47.44 | 47.45 | 47.45 | 47.68 | <措施 | |
|
|
|
|
|
|
|
|
调查1 | 25.40 | 25.45 | 25.51 | 25.92 | <措施 |
|
调查6改为调查7 | 0.09 | 0.23 | 0.23 | 0.17 | .20 |
|
从调查七改为调查八 | -0.01 | 0.01 | -0.01 | 0.09 | 23) |
|
|
|
|
|
|
|
|
调查1 | 88.94 | 88.00 | 88.91 | 86.40 | <措施 |
|
调查6改为调查7 | -1.75 | -2.07 | -1.07 | -1.65 | 收 |
|
从调查七改为调查八 | -1.07 | -1.97 | -1.40 | -2.34 | 02 |
|
|
|
|
|
|
|
|
调查1 | 75.89 | 75.09 | 75.52 | 74.24 | <措施 |
|
调查6改为调查7 | 0.72 | 1.00 | 0.99 | 0.56 | .77点 |
|
从调查七改为调查八 | -0.39 | -0.68 | -0.18 | 0.07 | .35点 |
一个SF-36: 36项简表健康调查。
澳大利亚妇女健康纵向研究1973-1978年队列中2012年调查6和2015年调查7的完成方式比较
调查7 | |||||
调查6 | 电脑 | 平板电脑/手机 | 纸 | Nonresponse | 总计 |
电脑 | 1981 (46.52) | 833 (19.56) | 846 (19.87) | 598 (14.04) | 4258 (100) |
平板电脑/手机 | 137 (23.74) | 229 (39.69) | 117 (20.28) | 94 (16.29) | 577 (100) |
纸 | 595 (18.81) | 411 (12.99) | 1408 (44.50) | 750 (23.70) | 3164 (100) |
Nonresponse | 203 (32.79) | 126 (20.36) | 290 (46.85) | - - - - - - | 619 (100) |
总计 | 2916 (33.84) | 1599 (18.55) | 2661 (30.88) | 1442 (16.73) | 8618 (100) |
在所有符合条件的女性中,调查5、6和7的总体回复率(所有完成模式)分别为62.01%(8200/13,223)、61.63%(8010/12,997)和56.61%(7186/12,693)。虽然在调查6中,对调查7做出回应的在线参与者的中断百分比很低(36/4152,0.87%),但在调查7中没有回应的女性中,中断百分比较高(43/692,6.21%)。同样,在对调查8做出回应的所有四种完成模式组的受访者中,在调查7中对超过10%的项目未做出回应的女性比例很低(91/ 6567,1.39%),但在对调查7没有做出回应的受访者中,这一比例较高(在线回答调查6的女性为7.4%[51/692],在纸上回答调查的女性为3.2%[24/750])。
1973年至1978年出生的女性在2012年接受调查时年龄在34岁至39岁之间,她们更多地生活在城市,受教育程度更高,更有可能从事全职或兼职工作,总体上健康状况更好(见
至于年龄较大的队列,即使在1996年的基线调查中,组间的这些差异(回顾性)也很明显
根据调查完成模式,对澳大利亚妇女健康纵向研究1973-1978年队列中接受2012年调查6和2015年调查7的妇女(N=6567)进行比较。
特征 | 在线/在线(n = 3189a、b), n (%) | 在线/纸(n = 963b), n (%) | 论文/在线(n = 1007c、b), n (%) | 纸/纸(n = 1408b), n (%) | |
|
|||||
主要城市 | 1917 (64.68) | 539 (57.16) | 543 (54.96) | 749 (53.92) | |
内部区域 | 701 (23.65) | 261 (27.68) | 272 (27.53) | 397 (28.58) | |
外区域 | 289 (9.75) | 132 (14.00) | 147 (14.88) | 217 (15.62) | |
远程/非常遥远 | 57 (1.92) | 11 (1.17) | 26日(2.63) | 26日(1.87) | |
|
|||||
学校学历及以下 | 108 (3.41) | 44 (4.64) | 50 (5.04) | 127 (9.20) | |
高等学历 | 297 (9.39) | 110 (11.59) | 118 (11.88) | 200 (14.49) | |
贸易证书/文凭 | 786 (24.84) | 257 (27.08) | 263 (26.49) | 418 (30.29) | |
大学学位 | 1973 (62.36) | 538 (56.69) | 562 (56.60) | 635 (46.01) | |
|
|||||
合作 | 2493 (78.79) | 785 (82.72) | 808 (80.24) | 1078 (76.95) | |
没有人陪伴 | 671 (21.21) | 164 (17.28) | 199 (19.76) | 323 (23.05) | |
|
|||||
全职 | 1429 (45.15) | 368 (38.78) | 389 (38.71) | 493 (35.09) | |
兼职 | 1189 (37.57) | 414 (43.62) | 432 (42.99) | 626 (44.56) | |
不工作 | 547 (17.28) | 167 (17.60) | 184 (18.31) | 286 (20.36) | |
|
|||||
不吸烟 | 2008 (63.32) | 601 (62.93) | 635 (63.18) | 855 (60.85) | |
他以前吸烟 | 875 (27.59) | 272 (28.48) | 265 (26.37) | 353 (25.12) | |
当前吸烟者 | 288 (9.08) | 82 (8.59) | 105 (10.45) | 197 (14.02) | |
|
|||||
Nondrinker | 330 (10.41) | 102 (10.68) | 115 (11.44) | 209 (14.98) | |
低风险/很少喝 | 2697 (85.08) | 804 (84.19) | 859 (85.47) | 1127 (80.79) | |
危险的酒鬼 | 143 (4.51) | 49 (5.13) | 31 (3.08) | 59 (4.23) | |
|
|||||
好/很好 | 1979 (62.21) | 600 (62.50) | 593 (58.95) | 818 (58.18) | |
好 | 943 (29.64) | 284 (29.58) | 323 (32.11) | 465 (33.07) | |
公平/可怜 | 259 (8.14) | 76 (7.92) | 90 (8.95) | 123 (8.75) |
一个有9名女性在网上回答了这两项调查,但她们没有被包括在内
b并非所有女性都对调查做出了回应。
c在调查6中有一名女性使用纸张,在调查7中有一名女性没有被包括在调查中
根据调查完成模式,比较澳大利亚妇女健康纵向研究1973-1978年队列中对调查6和7作出答复的妇女的调查1(1996年)、5(2009年)、6(2012年)和7(2015年)的措施。
特征 | 在线/在线(n = 3189) | 在线/纸(n = 963) | 论文/在线(n = 1007) | 纸/纸(n = 1408) |
|
|
|
20.75 | 20.79 | 20.81 | 20.87 | 。08 | |
|
|
|
|
|
|
|
|
调查1 | 22.81 | 22.24 | 22.73 | 22.77 | .003 |
|
调查5改为调查6 | 0.36 | 0.44 | 0.42 | 0.50 | .37点 |
|
调查6改为调查7 | 0.60 | 0.60 | 0.61 | 0.55 | .92 |
|
|
|
|
|
|
|
|
调查1 | 92.61 | 92.45 | 91.67 | 91.40 | <措施 |
|
调查5改为调查6 | 0.14 | 0.25 | -0.22 | 0.57 | 收 |
|
调查6改为调查7 | -0.45 | -0.14 | 0.58 | -0.28 | .35点 |
|
|
|
|
|
|
|
|
调查1 | 70.65 | 69.93 | 68.13 | 68.22 | .008 |
|
调查5改为调查6 | 0.03 | 0.14 | 0.25 | 0.53 | 总共花掉 |
|
调查6改为调查7 | -1.07 | -1.06 | -1.70 | -1.68 | 50 |
一个SF-36: 36项简表健康调查。
在一项完善的纵向研究中,引入在线或纸质完成连续调查的选择,使我们能够检查参与者如何随着时间的推移做出反应。不出所料,我们发现更年轻、受过良好教育的女性更有可能选择在线教育。令人惊讶的是,我们发现大量第一次在线完成调查的女性在随后的调查中更喜欢纸质版本。事实上,对于60多岁的女性来说,从网上转向纸质报纸的人数超过了从纸质报纸转向在线报纸的人数。
总体而言,60多岁的女性倾向于继续纸质调查,如果她们选择在线调查,大多数人会使用电脑。相比之下,30多岁的年轻女性更有可能采用在线版本,虽然大多数人更喜欢电脑而不是手机或平板电脑,但在随后的调查中,许多人确实尝试了这些替代品。
在这项研究中,参与者错过一个(或多个)三年一次的调查,但完成后续调查的情况并不少见。我们发现,在下一次调查中,完成纸质调查的女性比完成在线调查的女性更有可能成为非受访者。
尽管有一些证据表明,引入在线选项对关键变量的时间变化有影响,但对选择不同完成模式的女性的影响是相似的。也就是说,在这些与健康相关的变量中,完成模式的自我选择和测量之间几乎没有混淆的证据。将纸质调查的格式更改为更接近在线调查的格式可能会在同一调查浪潮中实现测量等效,但随着时间的推移会带来不连续。
在这篇论文中,我们报告了澳大利亚30多岁和60多岁女性的调查反应行为。研究结果可能不适用于男性、其他年龄段的人,或上网较少的人。尽管如此,这是一项有18000多名参与者的大型研究,这些参与者最初是在1996年基线时从澳大利亚几乎所有年龄组的女性中随机选择的。随着时间的推移,国家移民和学习减员改变了研究人群的代表性,更倾向于受教育程度更高和在澳大利亚出生的女性,但由此产生的偏差不太可能影响主要结果的方向[
尽管在线调查首次引入时,澳大利亚的互联网接入率超过80%,但对于完成一项长时间的调查来说,它可能还不够可靠。在每次调查(纸质或在线)结束时,鼓励女性以自由文本形式提供额外的评论和建议。虽然许多女性确实对各种话题发表了评论,但只有不到五人提到了完成模式,主要是说她们在访问在线版本时遇到了困难。
以前大多数比较在线调查和纸质调查受访者的研究都是横断面的。他们发现了与我们相似的结果:更年轻、受教育程度更高的人更有可能在网上做出回应。
正如其他人报道的那样[
尽管与纸质调查相比,在线调查具有节省成本的优势,但我们发现后者吸引的是不同的潜在受访者群体。这种差异很可能导致应答分布的偏差,除非采用了应答特征(相对于目标人群)的加权。从纵向的角度来看,我们还发现完成纸质调查的女性对后续调查的回应较少,这增加了潜在的偏见。总之,如果混合模式选项是可行的,它们很可能产生比唯一的响应选项是在线的更有代表性的结果。
方差分析
身体质量指数
36项简短健康调查
英国家庭纵向研究
本文所依据的研究是昆士兰大学和纽卡斯尔大学开展的澳大利亚妇女健康纵向研究的一部分。我们感谢澳大利亚政府卫生部提供的资金和提供调查数据的妇女。
没有宣布。