我们使用谷歌进行搜索，因为它是截至2015年全球最常用的搜索引擎[ 16]。此外，谷歌的搜索引擎使用了一个强大的机器学习系统，名为RankBrain [ 17]以及被称为《变形金刚》双向编码器表示的自然语言处理技术[ 18来从大量的搜索查询中检测模式。Google使用严格的语言处理算法来评估搜索查询的意图，对数十亿个索引网页进行排序，并建议与搜索最相关的网页[ 19]。得到的模式和数据用于形成与原始搜索内容相关的常见问题解答列表。常见问题在标有“人们也会问”或“常见问题”的框中找到。谷歌为每个常见问题分配一个链接，链接到“回答”该问题的信息[ 20.]。谷歌使用其网站管理员指南从搜索结果中删除低质量的垃圾网站，并使用名为PageRank的系统优先考虑高质量的来源[ 19]。总的来说，这些常见问题代表了数百万关于医疗信息的常见问题。每个常见问题解答的链接答案揭示了个人在谷歌搜索医疗信息时可能遇到的信息来源。我们的方法改编自Shen等人的研究[ 21]，他使用谷歌常见问题来可靠地揭示对骨科手术的常见担忧，并评估建议信息的透明度。

2021年1月23日，为了最大限度地减少个性化广告算法，我们使用新安装的网络浏览器，分别搜索了谷歌[ 22]以下三个术语:“covid - 19疫苗”、“辉瑞covid - 19疫苗”和“现代covid - 19疫苗”。我们选择这些术语是为了捕捉在我们搜索时仅有的两种COVID-19疫苗最可能的一般查询。对于每个查询，我们都会刷新Google生成的“常见问题”或“人们也会问”框中的常见问题列表。通过展开FAQ上的选项卡，会出现其他FAQ。我们重复这个过程，直到每个搜索至少有150个常见问题，因为使用类似方法的研究建议使用50-150个来源[ 21]。我们使用推荐来源数量的高端(150)有两个原因:增加遇到与当前研究相关的常见问题解答的可能性，并反映文献中的先例。由于查询结果是根据用户的位置、搜索历史和搜索设置定制的，因此我们使用干净的浏览器来最大限度地减少历史和设置的影响，同时允许结果反映来自美国的查询[ 19]。

在得到的常见问题解答中，我们仅提取了与COVID-19疫苗直接相关或提及的问题及其答案链接。调查人员在2021年1月23日使用谷歌表格提取了这些数据。FAQ数据提取于2021年1月23日完成。提取后，从单个搜索中删除任何重复的faq，然后在3个搜索中删除任何重复的faq。在筛选和减少过程之后，我们的搜索产生了关于COVID-19疫苗的独特常见问题的汇编。

采用从以往研究中改编的方法[ 16， 21]，我们首先使用了罗斯威尔问题分类[ 23将常见问题分为三大类:事实、政策和价值。事实问题进一步细分为四组:安全性和有效性、疫苗给药计划、成本和技术细节。政策问题再分为两组:指征和并发症。价值问题被细分为两组:可信度评估和风险或收益评估。接下来，我们根据之前建立的分类方案将答案来源分为商业、学术、医疗实践、政府或媒体渠道[ 21， 24]。 表1显示了 问题分类和 回答源类型定义。对于每个答案来源，我们提取了原产国。

《美国医学会杂志》(JAMA)的基准标准[ 25]，然后用来评估每个答案来源的信息透明度。JAMA基准标准已用于有效筛选基于网络的信息，以了解信息透明度的基本方面[ 21， 26- 28]。《美国医学会杂志》的基准标准也被用于表征2020年初关于COVID-19的基于网络的错误信息[ 29]。满足3个以上标准的来源被认为具有高透明度，而满足少于3个标准的来源透明度较差。 表2列出了JAMA基准标准定义。

使用Brief DISCERN信息质量评估工具对信息质量进行评估。DISCERN是一系列最初由Charnock等人提出的问题[ 30.]作为一种手段，使患者和提供者能够快速可靠地确定有关医疗的书面卫生保健信息的质量。DISCERN质量评估工具已被用于评估各种医疗领域互联网资源的质量[ 31- 33]。Khazaal等[ 34]开发了一个精简的6项版本(Brief DISCERN)，具有相当的信度和效度，它保留了原始工具的优点，同时提供了一个潜在的更用户友好的格式。因此，我们使用了之前使用过的Brief DISCERN质量评估工具[ 35， 36]。来源根据中列出的标准从1到5打分 表3。

作者NS和SS采用JAMA基准标准和Brief DISCERN工具，以掩盖重复的方式，作者MH解决任何差异。该方案已提交给俄克拉荷马州立大学健康科学中心机构审查委员会，并确定为非人类受试者研究。

每个常见问题解答的分类报告了频率和百分比。卡方检验用于确定JAMA基准标准与来源类型之间的关联。采用单因素方差分析来确定Brief DISCERN平均得分是否因源类型而异。进行事后比较 t采用Bonferroni校正检验来识别源类型类别之间的平均差异。使用类内相关系数确定每个评估的评价者一致性。

使用Rothwell分类系统，大多数faq寻求事实信息(22/28;78.6%)。在这些事实性问题中，最常见的是安全性和有效性(9/ 22,40.9%)，其次是技术细节(6/ 22,27.3%)、疫苗给药计划(6/ 22,27.3%)和成本(1/ 22,4.5%)( 表4)。

最常见的回答来源类型是媒体(12/28,42.9%)，其次是政府来源(11/28,39.3%)，商业来源(3/28,10.7%)，学术来源(1/28,3.55%)和医疗实践(1/28,3.55%)。被分类为技术细节的常见问题回答最多的是媒体(4/ 6,66.7%)。在被归类为事实的常见问题中，大多数是由政府来源回答的(11/ 22,50 %)。政府来源也最常回答与安全性和有效性(5/9,55.6%)、成本(1/1,100%)和疫苗给药计划(3/6,50%)相关的常见问题( 表4)。总的来说，28个答案来源中有26个(92.8%)来自美国，1个来自英国(3.6%)，1个来自澳大利亚(3.6%)。

共有19个来源符合3条及以上JAMA基准标准，其中政府来源占多数(10/19,52.6%)，其次是媒体(7/19,36.8%)，商业来源(1/19,5.3%)和学术来源(1/19,5.3%)。在少于3个标准的来源中，媒体最常见(5/9,55.6%)，其次是商业来源(2/9,22.2%)，医疗实践(1/9,11.1%)和政府来源(1/9,11.1%)。大约92.7%(11/12)的政府来源符合3个或更多的JAMA基准标准，而58.3%(7/12)的媒体机构符合3个或更多的标准。JAMA基准标准的总体表现在不同来源类型之间没有显著差异( χ²₄= 7.40; P=点);然而，我们发现在满足JAMA作者基准标准的单个来源的表现与来源类型( χ²₄ = 18.03， P<.001)， 11/28(39.3%)的媒体来源符合作者标准，而10/28(35.7%)的政府来源不符合作者标准。我们还发现JAMA基准标准的披露标准和来源类型之间存在类似但负相关的关系( χ²₄= 15.36; P= 0.004)， 10/28(35.7%)的政府消息来源符合这些标准，而9/28(32.1%)的媒体不符合这些标准( 表5和 6)。

方差分析显示，不同来源类型的Brief DISCERN平均得分存在显著差异( F_4、23= 10.27; P<.001)，表明不同来源类型在质量上存在重要差异。经Bonferroni校正的事后分析显示，政府和商业来源在Brief DISCERN得分上存在显著差异( P=.002)，以及政府消息人士与媒体之间( P<措施)。按来源列出的Brief DISCERN分数的均值(SD)值见 表6。我们的分析的组间一致性很高(组间相关=0.96;95% ci 0.95-0.97)。

使用谷歌及其搜索分析，我们能够确定在美国有关COVID-19疫苗的最常见问题。谷歌通过使用全国数百万的搜索查询生成了这些常见问题解答。此外，我们为每个FAQ评估指定的“答案”来源，评估每个来源的信息透明度和质量。据我们所知，这项研究是第一个使用谷歌搜索分析来评估美国公众关于COVID-19疫苗的最常见问题的研究。我们的研究也是同类研究中首次确定用于解决COVID-19疫苗相关问题的常见答案来源，并评估其透明度和质量。在接下来的演讲中，我们将讨论在当前COVID-19疫苗接种运动的背景下了解COVID-19常见问题的重要性，同时为提高公众接种疫苗的信心和意愿提供建议。

最受欢迎的与COVID-19疫苗相关的问题寻求有关安全性和有效性的事实信息，表明公众对这些主题的关注程度更高。与我们的发现一致，调查研究发现，安全性和有效性是公众和卫生保健工作者报告的最常见的COVID-19疫苗问题[ 37- 40]。此外，研究已将安全问题确定为COVID-19疫苗犹豫的最常见原因之一[ 8， 38- 42]。在美国，调查显示，10%至20%的成年人和约8%的医护人员拒绝接种COVID-19疫苗[ 8， 37， 39， 43]。虽然接种COVID-19疫苗的意愿有所提高，但成年人拒绝接种疫苗的比例高得惊人，这对保护我们最脆弱的人群构成了重大障碍[ 43- 45]。在美国，疫苗犹豫和拒绝接种的潜在成本并非COVID-19大流行所独有。例如，2019年在华盛顿州克拉克县发生了麻疹病毒爆发，疫苗可以有效控制这种病原体的爆发[ 46]。71人中，61人(86%)未接种疫苗，52人(73%)为儿童[ 46， 47]。此外，自2013年以来，克拉克县的疫苗接种率比全国平均水平(88%)低10%-14%。据估计，2019年的麻疹疫情造成了330万至350万美元的劳动力、直接医疗费用和生产力损失[ 48]。如果接种足够的疫苗，克拉克县麻疹爆发的代价很可能已经减轻或减少[ 47]。因此，为了防止类似但可能更糟糕的COVID-19后果，有效教育公众COVID-19疫苗的安全性对于提高COVID-19疫苗接受度至关重要[ 49]。

总体而言，媒体回答的COVID-19疫苗常见问题最多，其次是政府来源。关于安全性和有效性的常见问题更多地由政府来源回答，而媒体经常回答有关技术细节的常见问题。每个常见问题的答案来源链接在“人们也会问”或“常见问题”框中，是由谷歌[ 50]。这些直接答案来自谷歌的“可信实体”数据库，基于关系主题和机器学习[ 50]。虽然“可信实体”似乎相当模糊，但谷歌似乎认为直接回答是“可信的”，基于清晰、完整和缺乏过多的宣传术语。公众对疫苗的信任和接受意愿是疫苗接种运动成功的关键因素[ 44， 51- 53]，在科学诚信、客观和透明的基础上，直接回答COVID-19疫苗常见问题可能更为合适。

政府直接回答的常见问题更有可能满足3个或更多的JAMA基准标准，这表明政府的回答更透明。此外，政府和学术来源的质量明显更高。虽然媒体无疑是公众健康信息的重要来源，但这些研究结果表明，政府来源可能更适合解决公众对COVID-19疫苗的担忧。虽然媒体的透明度和质量都不高，但有明显的理由使用更可靠和客观的消息来源。总的来说，新冠肺炎虚假信息猖獗，舆论很容易被操纵[ 29， 45]。事实上，媒体是传播2019冠状病毒病错误信息的频繁来源，广泛的新闻报道放大了虚假说法[ 29， 54]。例如，大流行早期的新闻报道在缺乏证据的情况下，吹捧羟氯喹是一种“治疗方法”，使这种错误信息长期存在[ 55]。最近，与COVID-19疫苗更具体地相关，有关COVID-19疫苗导致女性不孕的谣言在社交媒体上流传[ 56]。最后，新冠肺炎疫情新闻报道的政治化和两极分化严重影响了公众对新冠肺炎应对政策的态度[ 55， 57- 60]。综上所述，媒体作为可信来源的麻烦进一步支持了使用政府机构等公正的答案来源。

最重要的是，我们建议个人将卫生保健专业人员视为有关COVID-19疫苗的主要信息来源。然而，在获得卫生保健专业人员的机会有限的情况下，基于网络的来源无疑提供了快速提供有关COVID-19疫苗的高质量和准确信息的机会。我们同意米尔斯和Sivelä [ 61成功的COVID-19疫苗接种运动取决于获得公众对卫生保健系统和政府机构(如疾病控制与预防中心和世界卫生组织)的信任，同时也要最大限度地减少疫苗错误信息。此外，政府消息来源必须努力将科学密集的文献翻译成易于理解的信息，以回答广泛关注的问题。因此，本研究结果的传播可能会促进公众对这些机构的信任，因为我们已经表明，政府和学术来源提供了最透明和最高质量的信息，以解决与COVID-19疫苗相关的问题。

谷歌最近通过与俄亥俄州立大学合作打击COVID-19错误信息，表明了他们支持这些COVID-19疫苗接种活动的意愿[ 62]。这一伙伴关系旨在确保人们获得有关COVID-19疫苗的准确信息，以增加公众接种疫苗的信心和意愿。因此，根据谷歌目前的意图，我们建议将所有COVID-19疫苗常见问题与政府和学术答案来源联系起来;这将为人们提供透明和高质量的疫苗信息。至少，有关安全性和有效性的常见问题应由政府来源回答，因为安全性和有效性问题是COVID-19疫苗犹豫不决的主要驱动因素之一[ 39- 42]。

本研究的主要优势在于将谷歌常见问题解答(Google FAQs)纳入研究，作为对数百万关于COVID-19疫苗的个人查询的新见解来源，这是对已发表文献改编的方法的应用[ 21， 26- 28， 34， 35]并在此基础上改进。使用谷歌生成的常见问题解答来探索有关COVID-19疫苗安全性和有效性的关注内容，可以防止调查研究的常见局限性，如低回复率、报告偏差和选择偏差。此外，谷歌的大型数据集可以持续实时分析，在解决公众的医疗问题时，可能会提供更好、更具体的目标。所有分类和评估均按照Cochrane Review和元研究领域专家制定的标准以隐藏重复的方式进行[ 63， 64在调查者之间具有很高的相互信度。

然而，我们的研究并非没有局限性，比如谷歌搜索输出的动态性。随着对COVID-19疫苗相关信息的搜索不断进行，将产生新的和更新的常见问题解答，将我们研究的普遍性限制在进行搜索时。此外，我们使用的透明度和质量评估不检查信息的准确性，因为这需要对有关COVID-19疫苗的普遍接受的事实进行逐个来源的比较，使我们的评估成为信息透明度而不是信息准确性的衡量标准。最后，常见问题和答案来源的分类因其主观性而受到限制。虽然这些类别是根据以前的报告制定的，并且在观察员之间具有很高的可靠性，但类别之间仍有重叠的可能。

权宜之计开发和批准COVID-19疫苗是世界上最伟大的科学成就的顶峰;然而，如果没有积极的公众接受和充分的咨询和教育，COVID-19疫苗接种工作可能会受到阻碍。使用谷歌，我们可以根据对COVID-19疫苗相关内容的数百万次搜索获得常见问题列表，这反映了人们普遍关注的问题。我们发现，与COVID-19疫苗相关的最常见问题与疫苗安全性和有效性有关，这得到了调查研究结果的支持。我们发现，政府和学术来源提供了最透明和最高质量的网络信息，以回答公众最常见的关于COVID-19疫苗的问题。认识到对COVID-19疫苗的共同关切，可以更好地帮助卫生保健专业人员、研究人员和政府机构改进疫苗接种工作。确保疫苗接种运动的成功需要公众的信任，这可以通过提供高质量和透明的COVID-19疫苗信息(例如政府来源提供的信息)来增强。