要保证一个高质量的医疗信息网站的发展，需要考虑两个因素:(1)所呈现的信息(质量、准确、全面、平衡、公正等)和(2)信息被目标受众阅读和理解的能力。

基于这些因素，开发了一个评估工具，可以用来前瞻性地设计一个优化的网站的内容。本研究报告了该工具的组成，并通过对现有站点的回顾性评估进行验证。

开发了一个用于评估提供仿制药信息的网站的工具。这个网站质量评估(WQA)工具由一系列是/否类型的问题组成，其中积极或正确的信息被授予一分(见 表1)．对于信息缺失或信息不准确的情况，不计分。不能回答的问题被指定为“不适用”(N/A)，不给分。每个网站的WQA总分是由分配给每个评估问题的分数加起来的。

在WQA工具的开发过程中，使用了以下标准:

评估题目的数量将由题目决定，不是固定的。然而，上面提到的5个标准步骤中的所有领域都应该包括在所用的WQA问题中。

为了验证该工具，所有搜索都在谷歌(google.com)上执行，并使用22个问题的仿制药WQA ( 表1)．这项调查是在几个英语国家进行的，使用的是在这些国家拥有互联网协议(IP)地址的计算机，目的是确定是否存在国家与国家(或地理)之间的差异。这些搜索在美国、加拿大、爱尔兰、英国和澳大利亚进行。在所有情况下使用的搜索词都是相同的:“仿制药或药物”(没有引号)。所有的搜索都是在2012年3月和4月进行的，共有24个不同的网站进行了评估。

为了测量使用该工具的可重复性，每个网站都由2个不同的评分者独立评估。

文本的可读性是一个重要的问题，特别是在医疗领域。本研究采用两种方法评估文本的可读性:(1)Flesch Reading Ease评分和(2)Flesch- kincaid Grade Level。然而，值得注意的是，在评估医学文本时也使用了其他可读性评估方法[ 18］．

从网站文本中随机抽取至少100字的连续文本样本，粘贴到Microsoft Word中。然后使用MS Word应用程序中的可读性统计数据对本文进行分析。

MS Word的Flesch Reading Ease评分基于Rudolf Flesch在1948年开发的一个公式[ 19］．它是用每个单词的平均音节数和每个句子的平均单词数来计算的。每个单词的音节是衡量单词难度的标准。每句话的字数是句法复杂性的一个指标。

Flesch阅读难度评分范围从0到100。从0到50是非常难读的。八十以上是很容易的很容易的阅读。Flesch自己把简明英语的最低分数定在60分[ 19］．微软的文档鼓励标准文档的作者以60到70分为目标[ 20., 21］．

Flesch-Kincaid Grade Level是1975年制定的，它根据读者理解文档所需的最低教育程度来衡量文档的可读性[ 22］．微软建议大多数文档的Flesch-Kincaid评分在7.0到8.0之间。根据1993年的一项研究，美国成年人的平均阅读水平为七年级，该研究的作者建议为公众编写的材料应达到五年级或六年级的阅读水平。 20.］．

这三种工具(WQA, Flesch Reading Ease score和Flesch Kincaid Grade Level)的两名审稿人之间差异的平均值和标准差被用来计算一致的界限，用Bland-Altman图表示。用类内相关系数(ICC)来衡量重复性。斯皮尔曼相关系数( r_年代)用来衡量网站排名与WQA得分和可读性评估之间的关系。绝对的值 r_年代>0.3被认为代表中度相关;>0.5被认为是强相关性。来自评估工具(SD)开发者的分数被用于相关分析。网站排名和WQA得分之间的相关性也被用来证明这个新开发的评估工具的预测有效性。

使用Bland-Altman图对2个独立评分器(SSD和NC)进行统计分析表明，对于网站的WQA评估，平均差异(SSD减去NC)用a中的实黑线表示 多媒体附录1为0 (SD 1.18)，表示平均完全一致。差异的中位数也为零(范围为-3到2)。只有一项观察结果超出了协议的范围(该网站列出了品牌药品和仿制药的名称)。一个评分者根据这个列表执行WQA，而第二个评分者在网站的其他页面上查找信息，因此解释了WQA评分的差异。ICC值为0.94，表明不同用户之间具有良好的重现性。

使用Flesch Reading Ease评分(从0到100分)和Flesch- kinkaid等级等级(从1到18分)对网站的可读性进行了类似的分析，结果显示，在的一致性水平相当(见b)和c) 多媒体附录1．阅读容易度得分的平均差值(SSD - NC)为4.66 (SD 12.06)，表明评分者SSD的平均得分略高于NC。等级水平的平均差值(评分者SSD减去NC)为-1.79 (SD 2.86)，表明评分者SSD的平均得分略低于NC。在每个案例中都有一个观察结果超出了协议的范围。然而，由于每个评级都是独立的，不同的文本部分很可能来自每个被评估的网站。所取案文的这种变化极有可能是由于有一项意见超出了一致的范围。Flesch Reading Ease score的ICC值为0.71,Flesch- kincaid Grade Level的ICC值为0.63，这表明了中等到较强的再现性，特别是考虑到这类评估的主观性，以及审稿人选择进行评估的文本中可能存在的可变性。

总的来说，WQA和可读性评分表明，当有超过1个评分者使用该工具时，可接受的再现性。

给出了WQA分数与全球不同地区(美国、加拿大、爱尔兰、英国和澳大利亚)谷歌serp排名的散点图 多媒体附录2．使用斯皮尔曼相关系数，可以看到WQA得分与谷歌SERPs排名之间存在中度到强相关性( 表2)．在全球不同地区进行的谷歌搜索中观察到的关系表明，相关性发生在与搜索者计算机的位置或IP地址无关的地方。相关性最强的( r_年代=-0.67)，在美国进行的谷歌搜索中可以看到。

因此，在制定列入医疗信息网站的信息时使用WQA评估问题，必然是朝着确保更高的谷歌SERP排名迈出的一步，从而为网站提供更多的潜在受众。

一般来说，在谷歌上的搜索排名和可读性也有关系( 表2)．Flesch Reading Ease得分与每个国家网站的SERP排名相关。同样，美国谷歌搜索结果( r_年代= -0.64)。一般来说，排名靠前的网站(排在第1、第2位等)往往具有较高的Reading Ease得分。由于本研究的样本量小(每个领域最多10个网站)，因此统计力低，因此提出了描述性分析，没有进行假设检验。

此外，Flesch-Kincaid Grade Level评估的分数与网站的SERP排名相关。总体而言，排名靠前的网站往往具有较低的等级等级值，这与美国搜索结果的关系最为显著( r_年代0.68)的价值。因此，这意味着可读性更容易的网站更有可能在谷歌serp中排名靠前，因此也更容易从谷歌serp访问。

在网站发布之前，必须收集和编写信息，并通过网站向目标受众传播。在任何主题的医疗/卫生保健信息网站的设计阶段，开发和使用特定的wqa类型的评估，将确保放入网站的信息具有足够的质量，以满足网站的潜在搜索者和用户。WQA可以用来评估将要出版的信息的草稿。使用正面评分和负面评分(正面评分为必要的、质量良好的、支持网站完整性所需的信息;对于任何不准确的、有偏见的或可能从信息完整性中提取的信息)采用负评分，确保在网站设计过程中信息收集的各个方面都得到了考虑。

由于互联网是病人在搜索医疗信息时最先可能去的地方之一[ 23]，并考虑到谷歌是全球使用的主要搜索引擎，占有全球搜索引擎市场近90%的份额[ 24]，对于在设计和开发中使用该工具的网站，WQA的相应使用可能会导致在谷歌serp上的更高排名。

此外，这项研究还表明，可读性更好的网站更有可能在谷歌搜索中排名靠前，因此也更容易被访问。因此，将Flesch Reading Ease和Flesch- kincaid Grade Level评估作为WQA的一部分，可以对网站在谷歌搜索中的表现进行更全面的评估。我们在本文中证明，高可读性得分和WQA得分更有可能导致较高的谷歌SERP排名。

这项研究的一个局限性是评估的网站数量较少。在这一领域的进一步研究可以利用技术，例如，一个网络爬虫获得额外的信息，可以在一系列类似的网站中进行聚类或共性检查。进一步的研究可以评估包含类似内容的网站，但将重点放在可用性和可访问性上，例如，网站是否设计良好，它们是否赏心悦目，导航是否用户友好?将这些内容从网站的设计和视觉呈现中分离出来，将进一步深入了解提供医疗信息的网站的可用性和可访问性，这将补充本文的发现。事实上，如果使用专注于仿制药的网站，来自这类研究的信息可能有助于了解这类药物在全球不同市场的采用和渗透情况。

此外，可读性公式也有局限性，因为一个好的分数并不总是完全表明信息的清晰(例如，不是所有的低音节单词都能被清楚地理解，较短的句子并不一定容易阅读，可能需要推理，这可能会增加文本的复杂性)。因此，在编写卫生保健信息时(特别是为文化水平低和英语水平有限的受众)，这些公式需要与其他简单的语言指南一起使用，而不是作为理解能力的唯一衡量标准。

在英国，大约16%的成年人被描述为“功能性识字”(即他们的识字水平达到或低于11岁儿童的标准)。 25])，以及国际成人识字调查(International Adult Literacy Survey)显示，爱尔兰共和国每4个成年人中就有1个连最简单的识字任务都有问题[ 26](在美国也有类似的比率[ 27和加拿大[ 28])，公平地说，在编写医疗信息网站时考虑到这一点可能是向公众提供医疗信息最重要的方面。当然，这一点适用于所有的印刷材料(如发给病人的小册子)，而不仅仅是发布在网上的信息。可以说，对医疗信息(例如要向公众传播的)编写者进行培训，使其学会使用简单、清晰的语言，是确保公众理解保健专业人员可能试图向他们传递的信息的一个重要方面。这一点变得尤为重要，因为研究表明，医生认为患者掌握的信息与患者实际理解的信息之间往往存在差异。 29］．

语言的复杂性作为信息可及性的障碍已经被维基百科承认^th全球最常登入的网站[ 30.]并且，作为一种解决方案，维基百科有英语和简单英语两种版本，其中简单版的目的是通过使用简化的语言和有限的词汇使读者更容易理解。因此，维基百科简单版的编写指南可能对为公众创建医疗信息网站的人有用[ 31］．

总体而言，在为医疗信息网站规划和编写材料时使用WQA工具，同时对书面材料的可读性进行评估，可能会确保该网站随后在谷歌serp中排名更高，从而更有可能被目标受众访问、阅读和理解。