癌症通讯新多媒体格式的评估

简介

在网上查询个人健康资料已成为互联网用户日益普遍的目标[1，2]，尤其是癌症患者[3.］．美国国家癌症研究所(NCI)因特网网站的一项重要功能是向癌症患者及其家属提供外行词汇中的关键而基本的信息，以帮助他们作出重要的个人健康决定。4］．考虑到消费者现在有大量的选项和选择，以用户喜欢的和可以从中学习的格式提供这些信息也是一个优先事项。为了帮助开发和试验未来为这些受众开发内容的策略，我们试图用5种相同内容的不同媒体格式来评估用户体验。作为如何向越来越多的宽带互联网用户提供内容的战略决策的一部分，三种新的媒体格式被创建和评估。

我们的假设是，与两种现有的、传统的、以文本为主的媒体格式的用户相比，新媒体格式的用户将(1)表现出对复杂癌症信息的更多“学习”，(2)更喜欢学习体验。

本报告描述了(1)从现有的主要文本内容中创建3种新媒体格式的初步试点项目，以及(2)对3种新的和2种现有节目格式的用户学习(性能)和偏好的正式比较。

本研究评估的5种媒体格式为:

1. 纸张(现有:平装小册子，以文字为主)
2. 网页(现有:网页上HTML格式的平装小册子)
3. 音频(新增:可供流媒体或下载的语音音频文件)
4. 音频+ Web(新增:与现有网页同步的语音音频)
5. Flash(新增:动画循环，图形，同步声音，字典)。

方法

作为格式比较的载体，我们选择了NCI的小册子“关于肺癌你需要知道什么”[5]，这是“关于癌症你需要知道的事情”系列节目的一部分[6]，由美国国家癌症研究所癌症信息服务部撰写[7］．这26本系列小册子提供了关于癌症的一般基本信息和关于25个特定癌症部位的信息(原因、统计数据、诊断、检测、治疗、结果、随访、临床试验)。它的目标读者是八年级到十年级的教育。该系列最初以平装小册子的形式出版，最近以HTML格式在网上提供，复制了平装书的设计和内容。

“关于肺癌你需要知道的事情”项目被选为这个试点项目有几个原因:

1. 每年新发肺癌的发病率很高[8］．
2. NCI的肺癌小册子似乎特别适合多媒体[6］．
3. 其他常见癌症，如乳癌[9]和前列腺[10已经在其他网站上有了许多著名的门户网站。
4. NCI肺癌内容2年内未计划重写。
5. 其他主要以病人为本的肺癌网上网站[11-13]，包括我们自己的[5]，即使使用多媒体软件，也不能充分利用多媒体功能[14］．
6. 所有教育和社会阶层的新诊断肺癌患者最近的数据显示，他们经常在网上搜索有关其诊断的信息[15］．

Flash (16]因为92%的美国电脑已经安装了Flash Player插件[17］．NCI与Medicom Digital, Inc .签约[18]与NCI内容专家合作，创建Flash程序[19］．联合团队使用现有的程序文本(逐字逐句)，但创建了一个新的用户界面，选择了包括在程序中的各种功能，在正式的可用性测试中测试了程序界面，并根据测试结果重新构建了界面。

Audible, Inc被选中创建和托管现有肺计划的新创建的语音文件，以及该系列中的其他节目[20.］．音频文件逐字逐句地记录现有的程序文本。添加了音频导航链接，为用户提供跳转到特定部分或从头到尾收听的选项。用户可以通过流媒体或下载内容到台式电脑或个人数字助理(PDA)来收听。在这项研究中，使用了下载到台式计算机的文件。

同步音频加Web版本结合了现有的Web页面和新的音频文件。

文本程序的网页版本[5]及平装本(可免费邮寄)[7]均可透过国家癌症研究所的网站[4］．

其中展示了这5种格式的“观感”多媒体附件1．

为了测试和比较原型用户从5种格式中“学习”癌症内容的情况，开发团队使用Authorware [21]软件创建并呈现16项多项选择题测试[附录2，3.］．NCI工作人员根据文本程序中的内容准备了测试问题和答案。Authorware界面还引出并记录人口统计信息，记录并分级测试答案，记录每个问题的时间，并记录可用性测试信息。所有数据都被写入Microsoft Access数据库。

为了在正式测试之前评估各个程序，一位有经验的主持人使用正式的脚本对5种程序格式中的每一种进行了测试。每次对用户进行一小时的测试，以评估媒体程序和测试工具(包括Authorware模块)的可用性和效果。调查对象包括不同年龄、教育程度和互联网经验的用户。这些会议发现，几乎所有用户都表现出了从测试前到测试后的学习。这一初步测试证实了参与者能够使用媒体程序软件本身和测试软件。虽然这不是正式的仪器验证，但它确实表明我们的数据是可靠的。

对于最终的测试，有5个用户测试会话，每个会话具有5种格式类型中的1种。每个会话有9个用户，每个会话持续大约1小时。每次会议的程序都是一样的。在这5个阶段中，所有9名用户都进行了关于癌症内容的Authorware预测试。然后，所有9人都必须从头到尾以5种格式中的一种体验整个肺癌项目——论文、Web、音频文件、Web +音频或Flash。(在Flash程序的测试版本中，测试问题被禁用了。)在以这种格式体验了整个程序之后，所有9名用户都观看/听到了其他4种格式的主要功能和外观的详细演示。然后，9名用户都被要求回答以下问题:“如果你需要自己学习肺癌的内容，并且只能获得1种格式，请按照1到5的顺序列出你的个人选择，并告诉我们你为什么选择这个顺序。”然后用户对内容进行了16项测试。测试问题的顺序在测试前和测试后是相同的，但答案的显示顺序在测试前和测试后有所改变。 At the conclusion of the session, users supplied additional usability data based on the primary format they experienced in the session. These data will be reported elsewhere.

与典型的可用性测试一样，一家非政府市场研究招聘公司根据NCI研究团队提供的筛选文件，选择了45名有偿志愿者。要求各组之间平衡有关参数。没有一名新兵可能亲身经历过癌症，有近亲患有肺癌，或在医学专业工作过。要求英语流利。年龄，性别，正规教育和互联网计算机经验的群体之间的平衡被要求。招聘公司发现并将所有志愿者用户分配到5个组中，不知道他们将测试哪种媒体格式。媒体格式组的测试顺序是由研究小组事先决定的，而不知道这些组招募了谁。虽然没有对用户进行严格的随机化，但搜索公司招募的用户基本符合研究团队要求的参数(表1)．用户签署标准的NCI同意，参与网站的可用性测试。为了遵守美国管理和预算办公室对联邦调查的限制，测试的5种程序格式中每一种只能招募9名用户。测试在NCI的新通信技术研究中心进行，在那里每个用户都有自己的电脑。

统计分析

配对t-检验和方差分析用于评估每种媒体格式用户内容知识的前测和后测之间的关系。采用单因素方差分析(One-way ANOVA)和Fisher's Least Significant Difference (LSD)事后检验(post-hoc test)来评估不同媒体格式组的测试前测验成绩和测试后测验成绩的差异。通过卡方检验来评估媒体偏好在年龄组和教育水平之间的关系。

结果

研究参与者的人口统计

表1根据45个用户被分配到主要演示的格式，总结了他们的人口统计特征。平均年龄为58岁。性别在各组中分布均匀。45名用户中只有6名拥有高中的最高教育水平，12名拥有大学后教育。这5个群体的特征反映了测试发生的马里兰州蒙哥马利县的人口统计数据。

智力测验成绩(表现)

为了评估用户对分配给他们的媒体格式所呈现的癌症内容的学习情况，对每个用户进行了16项多项选择的Authorware测试前测试和测试后测试。16分是满分。在基线时，两组之间的测试前得分没有差异。表2总结了用户被分配到的5个组的测试前和测试后的分数，以及整个组的分数。各组均有显著改善。只有4名用户的分数没有提高:47岁的高中毕业生被分配到纸上，74岁的大学毕业生被分配到音频，56岁的大学毕业生被分配到音频，77岁的大学毕业后被分配到音频+网络。基于这4个用户，没有明显的趋势。

特殊用户组的测验分数

由于NCI对老年用户和受教育程度较低的用户特别感兴趣，因此对这些群体的测试分数进行了单独分析。13例患者年龄≥65岁。这组学生测试前的平均得分是7.23分，而测试后的平均得分是10.62分。这是一个重大的改善(t₁₂= 6.03,P<措施)。每个年龄组(41- 54,55 -64，≥65)的测试前和测试后得分均有显著改善。然而，改善的增量在3个年龄组之间没有显著差异(F_{2, 42}= 0.266,P= .77点)。研究参与者太少，无法按年龄组和指定格式比较分数的统计改善。

6名参与者受过高中教育。这组学生测试前的平均分数是6.50，而测试后的平均分数是10.50。这是一个重大的改善(t₅= 3.38,P= .02点)。中定义的4个教育水平的每一个测试前到测试后的分数都有显著的改善表1．然而，改善的增量在4个教育水平之间没有显著差异(F_{3, 41}= 0.872,P=)。研究参与者太少，无法按教育水平和指定格式比较分数的统计改善。

用户格式首选项

45名用户被要求对他们喜欢的肺癌项目格式给出从1到5的排名。偏好数据显示在表3．绝大多数参与者更喜欢Flash格式。45名用户中有32名(71.1%)选择Flash作为首选，45名用户中有38名(84.4%)认为Flash是首选或第二选择。5人(11.1%)选择Flash作为他们的第五选择。音频是最不受欢迎的形式，在45名用户中有21人(46.7%)排在第5位。对于任何参与者来说，音频都不是首选或第二选择。

用户的选择也通过分配给用户的格式进行评估(表4)．Flash组的9个用户中有8个首先选择了Flash, Web组的9个用户中有6个，论文组的9个用户中有6个，音频组的9个用户中有4个，音频加Web组的9个用户中有8个。

用户的开放式评论通常表示，他们喜欢Flash格式，因为它丰富的视觉内容，因为他们认为自己是“视觉”学习者，因为他们认为使用动画、图片和声音而不是文本时，学习复杂的内容会更容易。喜欢平装书的用户通常会注意到它的便携性和独立于电脑的特点。喜欢Web版本的用户说，他们喜欢这个版本是因为他们熟悉Web页面的工作原理，也知道如何打印页面。喜欢音频加网络格式的用户说，他们认为这有助于他们通过阅读和同时阅读材料来学习。用户表示，他们“不喜欢”单独的音频格式，因为很难按照研究方法的要求从头到尾关注整个节目，而且他们发现很难在节目部分之间导航。另一些人则认为，在旅行中，在汽车或其他交通工具上，下载的音频可能很有用，因为那里没有互联网连接。用户还评论说，他们的年长亲戚可能更喜欢音频格式，因为它“就像收音机”，他们非常熟悉和舒服。不管用户接触到的是哪种格式，他们都喜欢这些内容，觉得可以从中学到东西，并感谢NCI为他们提供了这些内容。

由于NCI对老年用户和受教育程度较低的用户特别感兴趣，因此对这些群体的偏好数据进行了单独分析。

按年龄组选择格式

所有年龄段的人都可靠地选择Flash作为他们的首选媒体格式。表5显示来自最年轻、中间和最年长年龄段的参与者绝大多数更喜欢Flash格式。尽管在55岁至64岁的参与者中，选择Flash作为首选格式的比例较高，但这一比例与其他年龄组的参与者报告的没有显著差异(Χ²₆= 8.32,P= .216)。没有用户选择音频作为首选或第二选择。

按教育程度选择格式

表6按教育程度说明了格式的首选。高中教育水平的参与者更喜欢Flash格式。6人中有4人(66.7%)选择Flash作为首选。6人中有5人(83.3%)选择Flash作为首选或第二选择的格式。这些数据表明，无论个人教育水平如何，参与者都更喜欢Flash格式。不同教育程度的学生对格式的偏好差异无统计学意义(χ²₉= 8.32,P= .216)。没有用户选择音频作为首选或第二选择。

讨论

本研究评估用户对5种相同NCI肺癌内容格式的表现和偏好。最重要的发现是:(1)每种格式组的用户都显著提高了他们的测试分数，(2)用户压倒性地倾向于Flash格式的内容。这些发现与年龄和教育水平无关。测试前和测试后的测验分数数据表明，内容是有用的和有价值的，这与用户开放式的评论相对应。

我们曾希望发现，与其他格式相比，Flash用户在学习(测试表现)方面有显著提高，但没有发现。有几个可能的原因:

1. 不同媒体形式对学习效果无显著影响。
2. 我们创建的Flash格式并没有优化该格式的教学潜力。
3. 总体而言，用户太少，或者具有特定学习风格的用户太少，以至于无法发现有利于Flash的微小但显著的学习差异。
4. 所使用的选择题测试并不能很好地检测出测试形式之间真正的学习差异。
5. 要求用户从头到尾体验肺癌项目并不能用任何一种形式复制正常的用户学习行为。
6. 测试参与者可能没有反映出在不同的、更积极的实际癌症患者及其家属群体中可能发生的学习。

梅耶尔总结了大量关于多媒体和电子学习的研究，他认为“关于哪种媒体最适合教学的问题多少有些徒劳无益。”他说:“一般来说，媒体的影响很小……要把教学方法的效果和媒介的效果分开是不可能的。学习结果取决于教学方法的质量而不是媒介本身(强调)”［22］．狄龙和巴巴德在对教育研究的广泛回顾中指出，超媒体学习的好处“在学习者之间的分布是不同的，这取决于他们的能力和偏好的学习方式”[23］．Najjar对多媒体和学习的回顾表明，当多媒体信息“呈现给在所学领域知识水平较低或天赋较低的学习者”时，效果最好[24］．大多数新诊断的癌症患者都符合这一特征。梅耶尔的数据也证实了特定多媒体格式对具有特定学习风格的学习者的不同影响[25］．

复杂的健康信息很难传达给新诊断出患有癌症等严重疾病的患者。信息可能很难以有意义的方式传递，个人并不总是想要接收信息，焦虑可能会干扰学习。支持Flash的强烈偏好数据表明，信息搜索者可能更容易接受使用这种格式的癌症信息，这可能在吸引和保持用户兴趣方面具有潜在优势。

我们的研究数据证实了其他发现，即老年人更容易接受多媒体形式的学习。26］．另一方面，我们的数据也表明，学习与格式无关。因此，尽管在我们的研究中不太流行，但考虑到每年新诊断的癌症患者寻求基本信息的绝对数量，提供音频或音频加Web的相同内容可能仍会受到大量用户的青睐。

研究还表明，癌症患者所渴望的信息往往比他们所接受的信息要多，而他们接受信息的形式应该基于他们的偏好[27］．

事实上，测验的表现和个人教育水平对格式的偏好都没有差异，这进一步强调了Flash多媒体方法在全球的潜在吸引力。这与其他研究结果一致，即教育水平不能预测阅读能力，而对信息的渴望是关键因素。28］．

超过150个关于多种健康主题的Flash多媒体教程[29]，包括肺癌[14]，均可从美国国家医学图书馆(NLM)的MEDLINEplus网上获得[30.］．这些教程是更小的文件，可能比我们的带宽更小，但它们提供的内容深度不如我们的试点[19］．我们不知道NLM发布的任何关于这些教程作为教学工具的有效性的数据，尽管内部数据表明它们非常受欢迎(:Elliot Siegel，博士;NLM;口语交际，2003)。

在Flash程序界面的开发过程中，我们验证了程序使用的便利性，并在本研究中对Flash的偏好，我们建议继续使用和改进界面是有价值的。用户测试显示，用户对特定的程序功能很满意，包括动画循环、口语词典、图形和章节的选择性打印、用于复习的内部测验、章节大纲，以及除图形功能外的完整音频文本。

考虑到用户对新的Flash程序的强烈偏好，我们可以设想Flash界面在癌症教育中的其他用途，如增强纯文本知情同意书、临床试验教学、解释医疗程序、健康行为教学、让孩子参与内容学习以及非英语演示。这个界面对公众以外的群体也有帮助。目前，遗传学专业人员的复杂NCI内容正在使用我们的Flash界面编程。

我们希望继续在不同的用户群体中测试更多的多媒体原型，包括那些有访问问题的用户群体。在未来，我们希望对低视力用户进行可用性测试，以评估他们对新的语音文件的反应，我们怀疑这可能比合成屏幕阅读器听起来更愉快。我们还希望在听力较低的用户中测试Flash程序，因为当用户观看动画时，它有一个完整和同步的音频-文本选项。联邦法规要求遵守易访问性法规。提供多种格式的程序，确保我们保持合规。

当前Flash程序的一个潜在问题是文件太大，只有那些有宽带互联网连接的人才能使用。为此，政府正考虑以CD形式提供宽频。根据最近的数据，17%至28%的家庭用户可使用宽频，而且这一数字还在增加[17，31］．工作场所的用户，包括医疗办公室和医院癌症患者资源中心的用户，可能可以访问更高的带宽[世界杯时间比赛时间17，31］．用户明确需要并在网上搜寻癌症资讯[1，2］．随着越来越多的用户通过宽带连接访问互联网，以用户喜欢的格式提供他们想要的内容变得越来越重要，特别是考虑到在线癌症内容的广泛选择。我们知道有一些优秀的商业制作的基于解剖部位的癌症多媒体节目，使用声音、动画和电影剪辑[32］．目前，这些程序的文件太大了，只能在CD上找到，而且它们的内容的阅读水平比我们的高得多。

根据美国政府网站的第508条指引，多媒体程序的可达性是一个问题[33]及遵守http://www.w3.org/WAI/(WAI)指引[34］．像我们这样复杂的多媒体产品，如果单独提供，可能不符合已发布的指南。我们希望在同一个网页上以不同的媒体格式提供指向相同内容的多个链接。在适当的cancer.gov网页上，有了兼容的编程技术，并在肺癌内容的多媒体程序选项中有适当的链接标签，我们希望那些有视觉、听觉或运动障碍的人能够选择最适合他们的格式，并实现兼容的精神。计划对各种残疾用户组的多媒体格式进行额外测试。

我们的研究可能因为数字太少而有缺陷。从一开始，我们打算把这个项目作为一个小型的试点研究。此外，美国管理和预算办公室(OMB)规定，在没有OMB特别豁免的情况下，每个项目对公民的调查不得超过9名用户，这对于这类研究来说通常很难获得豁免，而且耗时。此外，在获得豁免之前，内容可能需要更改。为了遵守这些限制，每种格式只允许调查9名用户。在网上招募用户是最有效、最便宜的招募大量用户的方式。即使有OMB的豁免，我们也不认为让互联网用户自己在线比较同一程序的所有5种格式是可行的，即使有补偿。最重要的是，格式比较数据对未来NCI通信产品的规划特别有意义。虽然我们希望调查更多受教育程度较低、年龄较大的用户，但收集到的数据确实显示出非常具体的用户偏好，以及对新旧媒体格式的显著学习。尽管如此，这项研究能够评估5种媒体格式、4种教育水平和3个年龄组在知识和表现方面的改进。 The sample size was not large enough, however, to detect statistically-significant differences in improvements between any of the media groups, either alone or by subgroup stratum. Relatively-uniform increases in improvements were seen among all participants, and therefore the detected differences in our study were too small to be considered educationally important. Therefore, the benefit from increasing the sample size would not have resulted in improved overall results. However, an increased sample size would have allowed for the analysis of media formats by the different strata of age and education.

总之，在这项试点研究中，对5种相同的针对公众的NCI肺癌内容的评估表明，用户对所有5种格式都学习得很好，但绝大多数人更喜欢新的Flash多媒体教程格式。使用动画和声音的多媒体内容不需要在Flash中创建，但它应该利用声音和有用的图形和动画循环与用户进行有效和有趣的交流。在文本网页中嵌入Flash电影或其他多媒体动画循环也可以提供学习帮助，而不必创建全新的独立程序，并且组件可以在许多程序中重用。考虑到每年有大量的新诊断癌症患者，提供媒体格式的选择将使许多不同风格的学习者有最大限度的机会学习他们需要的信息。通过提供有价值的内容和保持用户的兴趣，新媒体选项在实现NCI的使命方面显示出希望，即以他们喜欢的形式教育公民关于癌症的必要知识。