这是一篇开放获取的文章,根据创作共用署名许可(http://creativecommons.org/licenses/by/2.0/)的条款发布,允许在任何媒介上无限制地使用、分发和复制,前提是正确引用最初发表在《医学互联网研究杂志》上的原创作品。必须包括完整的书目信息,//www.mybigtv.com/上的原始出版物的链接,以及此版权和许可信息。
孕产妇、新生儿和儿童健康(MNCH)家庭调查数据主要通过纸笔收集。智能手机的数据收集可能比纸笔更有优势,但几乎没有证据表明它们是如何比较的。
在MNCH家庭调查中,比较智能手机数据收集与使用纸笔进行婴儿喂养的做法。我们比较了两种数据收集方法在数据质量(数据记录、数据输入、开放式答案和评分者之间的可靠性)、时间消耗、成本、采访者的看法和遇到的问题方面的差异。
我们在中国河北省赵县赵州乡的四个村诊所招募了0至23个月婴儿的母亲。我们将母亲们随机分配到智能手机组和纸笔问卷组。两位采访者同时询问了母亲们关于婴儿喂养的做法,每个人都使用相同的方法(智能手机或纸笔)。
我们招募了120位母亲,她们都完成了研究。防止智能手机问卷的数据记录错误。在120份纸笔问卷(60名母亲)中,我们在55份问卷中发现了192个数据记录错误。对于问卷对,各组之间的记录差异无显著差异(
这是第一项表明智能手机可以成功用于中国农村婴儿喂养家庭数据收集的研究。与纸笔收集数据相比,使用智能手机收集数据可以消除数据记录和输入错误,具有相似的评分者之间的可靠性,每次访谈所花费的时间也相同。虽然在我们的小规模调查中,智能手机法的成本高于纸笔法,但在大规模调查中,这两种方法的成本是相似的。智能手机数据收集应进一步评估,以用于其他调查,并在更大范围内为中国和其他地区带来最大效益。
婴幼儿营养不良在低收入和中等收入国家非常普遍,并导致大量的死亡率和发病率[
母乳喂养和补充喂养做法是儿童健康的关键指标[
几十年来,基于纸笔的数据收集一直是家庭调查的标准方法。然而,这有几个问题,包括数据收集和输入错误,以及存储和重复输入数据的高成本[
智能手机可能比低端手机更适合用于数据收集,因为智能手机的屏幕更大,可以更容易地容纳复杂的功能(如无线上传和下载,屏幕触摸打字,照片或视频捕捉)。技术的快速发展和手机价格的下降使得发展中国家更容易使用智能手机收集数据。智能手机具有pda在数据收集方面的优点,例如能够将数据记录和数据输入过程结合起来[
目前尚不清楚智能手机能否有效地用于中国农村的家庭调查数据收集。这项研究旨在将使用智能手机和使用纸笔收集婴儿喂养实践数据与MNCH家庭调查进行比较。我们评估了数据质量(数据记录、数据输入、开放式答案和评分者之间的可靠性)、时间消耗、成本、采访者的感知和遇到的问题的差异。
这项研究比较了MNCH家庭调查数据收集的两种方法:智能手机和纸笔。我们将0至23个月婴儿的母亲随机分为智能手机组和纸笔组。两位采访者同时就婴儿喂养方法对母亲们进行了采访。两位面试官都使用了同样的方法,要么是智能手机,要么是纸笔。采访者同时分别记录了母亲们的回答。一个面试官提出问题,另一个面试官协助提供细节。我们指导面试官在每次面试中改变主导和辅助的角色。我们比较了两种数据收集方法在数据质量(数据记录、数据输入、开放式答案和评分者之间的可靠性)、时间消耗、成本、采访者的看法和遇到的问题方面的差异。我们在2011年7月进行了一项为期2天的小型试点研究,以测试这种设置。
我们在中国河北省赵县赵州乡的四个村卫生室进行了调查。关于研究设置的更多详细信息可以在
有两种类型的参与者:(1)采访者,他们对母亲们进行了一对一的采访;(2)母亲们,他们对婴儿喂养的做法进行了采访。我们从河北联合大学公共卫生学院招收了10名学生(1名大二学生,9名大三学生)作为面试官。我们拜访了乡村医生(在中国,乡村医生熟悉他们所在地区的所有分娩情况,并每月向他们所在的乡镇医院报告所有孕妇和新生儿),请他们(通过审查他们的记录)确定名单上所有符合条件的母亲,并邀请他们来诊所。如果母亲的孩子不满24个月,她们就有资格领取;我们排除了不是孩子母亲的照顾者。如果一个家庭中有超过2个符合年龄的孩子,我们会收集最小孩子的信息。符合条件的母亲也被要求邀请她们的邻居去诊所。研究小组一个接一个地走访了乡村诊所,直到我们的样本量达到120个。
我们的采访者有MNCH家庭调查的经验;其中3人在2011年7月参加了我们的试点智能手机问卷研究,所有10人在2011年8月参加了MNCH基线家庭调查(样本量为1600人)。虽然面试官对调查很熟悉,但我们为他们提供了额外的培训,以加强他们的技能。导师(学习小组成员)对采访者进行了为期2天的智能手机和纸笔方法的全面培训。培训课程包括沟通技巧、问卷解释、示范、角色扮演、与母亲的练习访谈和小组讨论。面试官被鼓励在遇到任何问题时提出问题。
这项研究在2011年9月进行了两天多;第一天,我们在三个乡村诊所招募了母亲,第二天,我们在第四个村庄达到了样本量。当一位母亲来到村里的诊所时,村里的医生告诉她这项研究的情况,并把有兴趣参与研究的母亲介绍给我们的主管。督导人员在研究前获得了母亲的口头知情同意。采访者获得了书面知情同意,然后在五个独立的乡村诊所中的一个询问母亲。我们送给每位母亲一条毛巾(价值5元,按2012年4月24日6.3美元的汇率折合0.79美元)作为奖励。
一位主管给母亲们一个识别号码(第一位母亲的号码是1,第二位母亲的号码是2,依此类推)。在研究之前,我们使用Excel(2007版;微软公司,Redmond, WA, USA)随机将每个号码分配给智能手机组或纸笔组。10位面试官都随机抽取了许多,并被分配到他们在研究期间工作的5对面试组中的1对。5对访谈工作组轮流采访母亲。
对于那些被随机分配到纸笔法的母亲们,由一对指定的面试官提出问题,并打印在纸质问卷上。两位采访者分别用笔将受访者的回答记录在一份问卷上。一名主管收集完成的纸质问卷,并在访谈结束后立即进行检查,以确保任何缺失的信息或错误都能在母亲离开前得到纠正。有数据输入经验的两名学生分别使用EpiData 3.1 (EpiData Software,欧登塞,丹麦)输入数据。我们对两份文件进行了比较,通过核对原始问卷来解决差异。
对于那些被随机分配到智能手机方法的母亲们,一对指定的采访者会按照智能手机上的说明对她们进行询问。我们用的是中国的智能手机(C8600;华为,中国深圳),使用Android 2.2系统。每个面试官都通过触摸智能手机屏幕来记录母亲的反应。智能手机程序实时自动检查问题。当答案超出范围时,智能手机程序会发出警告。根据前面问题的回答,可以自动跳过三个问题。大多数问题都是选择题,只有一个答案或多个答案。有些问题需要填写数字,而对于其他变量,多重回答的答案选项之一是开放式的(这使得智能手机问卷可以输入汉字,纸笔问卷可以写下汉字)。
智能手机问卷的单项选择、多项选择、数字填写和文本填写问题的屏幕截图。
我们使用了MNCH家庭调查的母乳喂养与营养模块。这是一份世卫组织标准的家庭调查,我们将其翻译成中文。在过去的两年里,我们在赵县的几项研究中使用了它,并进行了一些小的修改,使其适合中国环境。有关调查的详细资料,请参阅
我们的主要结果是数据质量,我们将其定义为纸笔问卷中的数据记录错误和数据输入错误;评分者间信度;以及智能手机和纸笔方法之间的开放式答案差异。次要结果是两种方法在数据记录和输入的时间消耗、成本、采访者的看法和遇到的问题方面的差异。
我们只报告纸质问卷的数据记录错误,因为智能手机程序会在错误发生时自动提醒面试官(因此智能手机问卷中没有数据记录错误)。面试结束时,主管检查并纠正缺失的价值观或错误。实地调查结束后,其中1名主管填写了错误汇总表,填写了各类错误的发生频率和有错误的问卷数量。我们在Excel 2007中使用COUNT函数计算错误。
我们将评分者之间的信度定义为使用相同方法对同一母亲进行访谈的2位访谈者之间记录的重叠百分比[
我们仅报告纸笔问卷的数据输入错误,因为智能手机问卷回答在上传后自动转移到数据库(根据信息技术专家的说法,智能手机数据在转移到数据库过程中没有更改)。对于纸笔问卷,虽然有两个人分别输入和核对数据,但仍然可能出现错误。
我们计算了24个有一个开放式答案的问题的中文符号的数量。
纸笔问卷由访谈者记录访谈的开始时间和结束时间。对于智能手机问卷,软件自动记录了采访的持续时间。此外,我们记录了纸笔组数据录入和数据清理的时间消耗。
为了评估和比较成本,我们在纸笔问卷和智能手机问卷中使用了相同的成本类别(例如培训、旅行和住宿)。对于纸笔法,我们估计了打印和运输问卷、文具和数据输入的成本。在我们的智能手机成本评估中,我们使用了租用智能手机和软件的估计当地市场价格。为了比较纸笔法和智能手机法,我们通过问卷调查计算成本。此外,我们使用了两次大规模家庭调查的成本数据(样本量为1200和1600)来显示更大规模调查的成本。
在实地调查之前,我们给每个面试官发放了纸上的问卷。我们要求他们填写调查问卷,并在实地调查结束后交给主管。调查问卷包括一般信息(如年龄、性别和教育程度)、使用移动电话或智能手机的经验,以及对使用这两种采访方式的看法。我们问他们是否喜欢智能手机和纸笔教学法,面试官可以从1到5打分(1,非常糟糕;2、坏;3,好;4,好;5,非常好)。在实地调查结束后,我们的主管和所有的采访者进行了30分钟的小组讨论,讨论了纸笔调查和智能手机调查的不同之处(如采访需要的时间,哪种方法更容易与受访者沟通,以及母亲在采访过程中的反应)。
在田野调查过程中,我们指示采访者尽快在标准表格上记录问题,如笔丢失、程序错误等。实地考察结束后,主管们收集了所有的表格,并写下了问题。
我们使用SPSS 16.0 for Windows (IBM Corporation, Somers, NY, USA)进行统计分析。对于数据记录错误,我们从错误汇总表中手动统计所有错误,该错误汇总表由我们的现场主管填写。对于评分者之间的可靠性,我们手动比较了每组中所有完成的纸笔问卷和智能手机问卷,并报告了百分比变化。我们用卡方检验计算了两组之间评分者间信度的差异,并报告了百分比。我们没有使用kappa统计分析评分者之间的信度,因为我们无法在本研究中使用测试-重测设计。对于数据输入错误,我们使用EpiData 3.1对两个文件进行了比较,EpiData 3.1给出了关于不匹配问卷的报告。我们用百分比来报告差异。对于时间消耗,我们通过独立样本比较了两组工作对中数据收集的平均时间
对于采访者的看法,我们分析了录音讨论的转录,并记下了所有确定的问题。我们列出了面试官遇到的所有问题。
我们根据数据输入错误来确定样本大小。我们假设纸笔法的数据输入错误率为30%,智能手机法的错误率为0%。我们使用的alpha误差为0.05,beta误差为0.20,并计算出每种方法的样本量为120,每个方法有60个母亲。我们假设有10%的母亲会拒绝参与或退出研究。因此,我们计划每种方法招募67位母亲。
我们获得了北京首都儿科学会伦理委员会的伦理批准。这是一项比较研究,没有评估干预措施,因此没有在随机试验登记处注册。
我们在上传数据时对智能手机中存储的数据进行了加密。这些数据只有用特殊的软件才能解密。访谈者完成问卷后,通过网络服务器将数据无线上传到Excel数据库,然后以文本文件的形式保存在智能手机的存储卡中(用于备份)。只有管理人员才能进入数据库并在上传数据之前进行必要的更改。上传数据后,无法对数据库进行任何更改。督导员在每个实地工作日结束时收集智能手机,并在早上将智能手机(清除前一天输入的数据)交还给采访者。访谈结束后,主管收集已完成的纸质问卷,并将问卷存放在安全上锁的箱子中。
村医生向120名到村诊所就诊的母亲通报了这项研究,所有母亲都同意参加。
受访母亲子女的特征及每个村庄的母亲人数。
特征 | 总计 | 智能手机 |
某月 |
|
|
|
|||||
年龄(天),平均值(SD) | 353.88 (174.65) | 323.95 (149.86) | 383.82 (192.99) | 06一个 | |
性别(男/女) | 61/59 | 32/28 | 29/31 | .59b | |
|
|||||
总计 | 120 | 60 | 60 | ||
村1 | 25 | 16 | 9 | ||
村2 | 50 | 23 | 27 | ||
村3 | 24 | 11 | 13 | ||
村4 | 21 | 10 | 11 |
一个2-tailed
b皮尔逊卡方检验。
研究参与者的流动。
在纸笔问卷中记录错误。
错误类型 | 面试后立即 | 数据输入前 | 总计 | |||||
不。的 |
不。的 |
不。的 |
不。的 |
不。的 |
不。的 |
|||
1 | 缺少默认选项的确认 | 49 | 156 | 0 | 0 | 49 | 156 | |
2 | 遗失检验日期 | 1 | 1 | 0 | 0 | 1 | 1 | |
3. | 检查问题的回答错误 | 2 | 2 | 0 | 0 | 2 | 2 | |
4 | 圈出的两个选项 | 2 | 2 | 0 | 0 | 2 | 2 | |
5 | 选择错误的选项 | 3. | 4 | 0 | 0 | 3. | 4 | |
6 | 遗漏的问题 | 2 | 2 | 1 | 4 | 3. | 6 | |
7 | 单项选择题圈出了不止一个选项 | 1 | 1 | 0 | 0 | 1 | 1 | |
8 | 面试官的身份证号码错了 | 0 | 0 | 7 | 8 | 7 | 8 | |
9 | 错误的日期 | 0 | 0 | 1 | 1 | 1 | 1 | |
10 | 数据库设置错误 | 0 | 0 | 11 | 11 | 11 | 11 | |
总计 | 51一个 | 168 | 20.一个 | 24 | 55一个 | 192 |
一个有错误的问卷总数。一份问卷可以有多个错误,但被算作一份。因此,问卷的总数并不等于所有类型错误的总数。
我们评估了单回答和多回答变量以及数量变量的评分者间信度;这可以在
面试官之间的可靠性。
智能手机号码/ |
手写数字/ |
|
|
没有记录变化的问卷对 | 15/60 | 20/60 | 收 |
没有记录变化的变量 | 134/186 (72.0%) | 126/184 (68.5%) | 。45 |
一个皮尔逊卡方检验。
对于开放式问题,我们手动统计变量中记录的字符数。智能手机问卷有48个字符,纸笔问卷有76个字符。
EpiData 3.1显示,120份问卷中有78份(65.0%)的纸笔记录不匹配,需要进行核对。
在第一个村庄,访谈者在纸笔访谈法(平均13.78分钟,标准差3.70)上花费的时间明显多于智能手机访谈法(平均10.78分钟,标准差2.37)(
对于纸笔方法,数据库完成需要16个小时(包括数据输入、检查和数据清理)。对于智能手机方法,数据库完成需要半个小时。这可以在
耗时为两种方法的调查过程。
阶段 | 智能手机的方法 | 手写的方法 |
准备 | 7天打印时间 | 一个由3名信息技术工程师组成的团队需要7天时间进行编程和安装 |
培训 | 2天 | 2天 |
实地考察 | 2天 | 2天 |
数据池 | 2人重复录入数据3小时,2人核对和清理数据5小时 | 每人0.5小时 |
使用智能手机和纸笔方法进行总体和每个村庄的访谈所花费的时间。
在中国赵县进行四次调查的费用(1000美元)。
调查 |
类型 | 不。的 |
成本 | 项目成本 | ||||||
物流 | 硬件和邮寄 | 数据池 | ||||||||
总计 | 每 |
总计 | 百分比 |
总计 | 百分比 |
总计 | 百分比 |
|||
1 | 智能手机 | 60 | 2.70 | 22.50 | 1.27 | 47.09 | 1.41 | 52.33 | 0.02 | 0.58 |
2 | 某月 | 60 | 1.57 | 13.05 | 1.27 | 81.24 | 0.04 | 2.71 | 0.25 | 16.05 |
3. | 智能手机 | 1600 | 41.57 | 25.98 | 34.82 | 83.76 | 6.59 | 15.86 | 0.16 | 0.38 |
4 | 某月 | 1200 | 28.52 | 23.77 | 25.56 | 89.60 | 0.71 | 2.47 | 2.26 | 7.93 |
我们分析了给面试官的10份问卷中的9份,因为我们收到了1份空白问卷。在这9位采访者中,8位在本研究之前有做过纸笔调查的经验,9位采访者中有4位有使用智能手机的经验。在关于采访者是否喜欢调查方法的问题上,他们对智能手机的中位数得分为4分,纸笔法的中位数得分为3分。共有4名受访者对智能手机的评分比纸笔法高1分,5名受访者对智能手机和纸笔法的评分相同。
所有面试官都积极参与了小组讨论。对于纸笔问卷,主要的问题是害怕跳过问题,必须在纸上写很多,可能会浪费时间,意识到在田野中不容易找到的选项有很高的风险,必须携带沉重的问卷,以及交通困难。采访者在使用智能手机时发现的唯一问题是,如果程序不稳定,他们就无法继续填写问卷。使用智能手机的面试官体验到以下好处:自动跳过功能和错误提示消除了面试官对出错的恐惧,每屏幕一个问题让面试官更专注于与母亲的交流,智能手机便携方便,数据上传快捷。采访者提到,母亲们表示,使用智能手机的方法比使用纸笔的方法更现代、更快捷。
在纸笔组中,只有一件异常事件被记录下来:一位面试官丢了笔,但她立即从主管那里得到了一支新笔。在智能手机组中,记录了5例异常情况。所有这些问题都与系统的稳定性有关,比如系统会暂停几秒钟或关闭。我们没有发现这些记录的异常导致数据丢失。
我们的研究表明,与纸笔法相比,使用智能手机收集母乳喂养和营养数据,消除了数据记录和输入错误,具有相似的评分者之间的可靠性,并且每次访谈所花费的时间相同。智能手机问卷中输入的汉字较少,这可能表明智能手机不太适合开放式答案。虽然在我们的小规模调查中,智能手机法的成本高于纸笔法,但在大规模调查中,这两种方法的成本是相似的。面试官可以接受智能手机的方法,在初步测试后,我们只遇到了一些小问题。
我们的研究有一些局限性。首先,在比较两种方法时,很难验证每一次访谈。母乳喂养和营养模块基于24小时的召回信息,测试和重测方法不可行。因此,我们使用相同的方法分配2个访谈者对同一位母亲进行访谈,然后比较两种方法之间的信度。然而,根据调查方法的不同,面试官可能会得到不同的回答(例如,面试官可能会更认真地对待纸笔问卷)。我们无法分析这个。其次,我们的样本量相对较小,这可能解释了时间消耗中相对较高的标准差。此外,这可能会限制我们的结果对其他设置的泛化性。然而,在开展研究时,我们没有一个比数据输入错误假设更好的指标。第三,我们不知道母亲们对访谈的看法,因为我们没有收集母亲们的看法的数据。 However, the interviewers reported that the mothers found the smartphones modern and quicker. Fourth, all our interviewers were medical students and had experience with questionnaire interviewing. All were young and could easily learn how to use the smartphone; this may be different for data collectors in nonstudy situations. We expect that this will be a minor problem, as smartphone ownership is rapidly increasing. Strengths of our study include our pilot test of the smartphone software, which ensured that the system worked, thorough training of our interviewers, and our experience with undertaking the MNCH survey in Zhao County.
虽然移动设备在过去20年里一直被用于健康数据收集,但我们不知道在中国有任何使用移动设备或智能手机进行数据收集的研究。在其他国家,在智能手机快速发展之前,许多研究使用掌上电脑(如pda)进行数据收集[
在中国,估计有70%的人口拥有手机,而且手机在城市和农村地区都广泛使用。
这项研究首次表明,智能手机可以在中国农村环境中成功用于数据收集。准确的数据对于任何公共卫生调查的成功和为适当的干预措施提供信息至关重要。智能手机数据收集可以防止数据记录和输入错误,从而提高数据质量。此外,与纸笔法相比,智能手机法的一个重要优点是提高了数据记录和输入阶段的效率。这可以节省大量的时间和成本。智能手机的数据收集应该为其他调查进行进一步评估,并在更大范围内为中国和其他地方带来最大利益。
更详细的信息在论文的方法部分。
更详细的信息在论文的结果部分。
孕产妇、新生儿和儿童健康
个人数字助理
世界卫生组织
我们感谢所有受访的母亲参与我们的研究,也感谢医学院学生的工作。我们感谢中国卫生部为这项研究提供资金支持。我们非常感谢我们在赵市妇幼保健院的同事对实地工作的协调和支持。同时,我们也要感谢软件公司为开发该软件提供的专业知识。我们非常感谢联合王国伦敦帝国理工学院初级保健和公共卫生系全球电子卫生股的Laura Gunn博士为我们提供统计支持。同时,我们也要感谢软件公司(北京伟深清宏科技有限公司)提供的开发软件的专业知识。
没有宣布。