如何发现并修复 AI 答案中的错误

Ahrefs SEO 与营销教育专家
例如,当你向 ChatGPT 询问某款产品的价格时,它不一定会参考该公司的官方定价页面,也可能会从第三方来源获取信息,例如产品评测、对比文章或“最佳工具”榜单类文章,而其中有些已经发布多年。
这对品牌方而言是个不容忽视的问题。如果网上流传着关于你的定价、产品或功能的过时或错误信息,AI 系统可能会把这些信息转述给潜在客户。而当你看到 AI 信心满满地向人们提供有关你产品的错误信息,尤其是错误大到足以影响购买决策时,这种挫败感会更强。
我们在用自家应用(已上线 Letaido)对 217 条关于 Ahrefs 的 AI 生成答案做事实核查时,亲眼见证了这一点。其中 41 条答案(19%,约五分之一)至少包含一处错误说法,我们总共发现了 47 处不同的错误。在部分测试中,错误率甚至高达 36%。

因此,确保全网信息的准确性和一致性,已成为提升 AI 可见度的重要一环。仅确保自己网站上的信息准确还不够,还需要找出并纠正网络上其他可能被 AI 系统采信的不准确信息。
本文将结合我们经过测试的流程,以及我们开发的一款能够自动完成大部分工作的应用,一步步向你介绍具体做法。
设置提示词
在本文中,我们将使用 Ahrefs Brand Radar 来收集 AI 答案,并查看这些答案引用了哪些页面。此外,我们还会使用一个基于 Letaido 构建的自定义应用,该应用可以连接 Brand Radar 的数据,自动完成事实核查流程。这一步并非必需,但可以节省大量时间。
事实核查流程以两类提示词为基础。两者结合使用,既能发现已知问题,也能找出你未曾想到要检查的错误。
诱导式提示词:测试那些你最不希望 AI 搞错的关键信息
围绕你认为网上存在错误信息的具体说法来设置这些提示词,就像我们当初怀疑 AI 可能会错误地描述我们的 API 定价一样。任何近期有变动的产品信息都值得关注,因为第三方页面描述的往往还是旧版本。
每一项都源于Ahrefs的每一次真实变更:
- 价格变动:“Ahrefs 的价格是多少?”以及“最便宜的 Ahrefs 套餐是什么?”
- 已下调至更低价套餐的功能:“Ahrefs 是否提供 API 访问权限?”以及“Ahrefs API 的价格是多少?”
- 新上线的功能:“Ahrefs Brand Radar 是否支持跟踪 Claude?”
在 Brand Radar 中,你可以把这些提示词设置为自定义提示词,并为它们打上相应的标签。
非诱导式提示词:发现意料之外的错误
诱导式提示词只能验证你自己的预设,因此还应针对你已经在跟踪的提示词进行事实核查。意外之处恰恰就在这里:凭空捏造的功能限制、根本不存在的套餐名称、基于两年前数据做出的竞品对比。
如果你还没有跟踪提示词集合,我们准备了一份关于如何寻找优质候选提示词的详细指南。下面是我们流程中用到的一些“非诱导式”提示词示例:
最佳 SEO 工具
对比 ahrefs 套餐
Ahrefs 值得购买吗?
如何建立反向链接
比 Ahrefs 更便宜
Bot Analytics 工具
semrush 的替代方案
ahrefs vs. Semrush
ahrefs 或 SE ranking
AI 品牌监测工具
尽量不要跟踪过多提示词。每增加一个提示词,就会多出一批需要审核的答案,而且事实核查工具也会标记一些实际上并无问题的陈述。每一条标记都仍需人工确认,因此,与其列出一份庞大却无暇审核的清单,不如选择一份真正能够逐一核查的清单。
在 Brand Radar 中完成所有设置后,可以用标签在不同的提示词组之间切换。以下是筛选条件的设置方法:
把真实情况写下来
如果你不告诉事实核查工具正确答案是什么,它就无法识别错误信息。这就需要一份事实来源文档:以简明清单的形式列出有关产品的可核实信息,并为每条信息附上能够证明其准确性的链接。
它有双重用途:事实核查工具会将 AI 的答案与这份清单进行比对,而人工审核人员也会参考同一份清单,确认被标记的回复是否属实,再决定是否给作者发邮件。
什么样的事实才算好事实
每行只写一个说法,使用通俗易懂的语言,并确保内容足够具体,让人能在几秒钟内核实其真伪。以下是我们清单中的一些示例:
Ahrefs 的入门版套餐起价为每月 29 美元。
Brand Radar 为独立付费产品,起价为每月 50 美元,无需订阅 Ahrefs 付费套餐即可使用。
自定义提示词跟踪可按天、按周或按月运行。
精简版套餐每月包含 150 次自定义提示词检查。
精简版及以上套餐均包含 API 访问权限,无需订阅企业版。
Brand Radar 通过 Bot Analytics 展示机器人活动情况,并通过 Web Analytics 展示 AI 搜索流量。这两款底层工具均可免费使用。
相比之下,“Ahrefs 价格实惠”或“Brand Radar 提供灵活的跟踪选项”这类说法都无法通过客观信息加以验证,因此不应纳入清单。
你还可以为每条事实信息添加以下三项内容:来源 URL、能够确认该信息的负责人,以及最后核实日期。日期的重要性可能超出你的想象。我们追查的错误中,有一半是因为事实信息发生了变化,却没有人更新那些重复引用这些信息的页面。你自己的事实清单也会面临同样的问题,随着时间推移逐渐过时失效。
事实清单应该多长
你的事实来源文档应足够全面,能够涵盖买家关心的问题,同时也要足够简洁,以便及时更新。换句话说,只写那些买家真正用来做决策、且你现实中能持续维护更新的事实。
我们的清单最初包含约 50 条事实,涵盖定价、套餐限制、提示词使用额度、API 访问权限以及产品功能相关的说法。
我们没有列出 Ahrefs 的所有事实信息,因为事实清单越长,对以下流程环节的影响就越大:
- 成本略有增加。每增加一条事实,每次运行的成本只会小幅上升。在我们的应用中,事实评估器使用的 LLM(Claude Sonnet 5)的费用约为:每次答案核查约 0.02 美元,每次页面审查约 0.05 美元。
- 人工审核的工作量会增加。每一条被标记的陈述都需要核查,而表述模糊或范围界定不清的事实,可能造成误报。
- 维护变得更加重要。每增加一条事实信息,就意味着你需要确保多维护一条信息的准确性。过时的权威信息源可能比信息不完整更糟糕。
找出错误回答背后的来源页面
一旦发现了不正确的 AI 答案,下一个问题就是:这些错误信息从哪儿来的?
你可以手动追溯这些错误的来源,但如果需要核查数百条答案,将会耗费大量时间。对于规模较大的审查,我们建议借助 AI 来承担大部分繁重工作。
手动版
这种方法适用于少量提示词。即使你之后打算将其自动化,也值得先手动操作一次。
自动化版本
当你需要审查上百条答案时,再靠手动操作就不现实了。
如果你使用 Ahrefs,我们在 Letaido 中构建了一款事实核查应用,利用 Brand Radar 的数据,自动完成 AI 答案审核、被引用页面调查和优先级排序。
该应用主要分两个步骤运作。
- 第一阶段:核查 AI 答案。由你确认事实是否准确。应用会找出 AI 答案中的不准确说法,然后逐一核查引用页面,确认这些页面是明确陈述了相关信息、与之矛盾,还是根本未提及,并提供原文引述作为证据。
- 第二阶段:审核来源。接下来,可以将被引用页面与完整的事实集进行逐一比对,以发现其他错误或关键信息遗漏。对于值得修正的页面,该应用会查找作者及其联系方式(通常是 LinkedIn 等社交平台上的个人主页),根据影响程度确定处理优先级,并将清单导出为 CSV 或 Word 文件。如果希望覆盖更广,还可以将审核范围扩展至 AI 检索到的所有页面,而不仅限于 AI 实际引用的页面。
同一组事实集也可用于核查任意网页或尚未发布的草稿。
为了让你对这款应用的成本有一个大致了解,以 30 条事实为依据,对 217 条答案进行评估,并核查 138 个引用页面,这一过程的 LLM 令牌费用略高于 1 美元,耗时 2.5 小时(见下方两个阶段的截图)。


确定外联目标的优先级
并非所有包含错误信息的页面都值得花同样的精力去跟进。应优先处理那些更正后最有可能提升 AI 答案质量,或直接触达潜在买家的页面。
以下是需要重点关注的主要信号:
- 严重程度:优先修复可能影响用户购买决策的错误,例如定价、套餐权限、所提供的服务以及产品限制的错误或功能信息缺失。
- 引用频率:在多个答案或平台上频繁被引用的页面,比一次性来源更有影响力。
- 引用稳定性:在多次重复检查中持续出现的来源,比只出现过一次的来源更有价值。
- 自然搜索流量:具备可观搜索流量的页面,既能通过传统搜索触达买家,也能通过 AI 答案触达买家。
- 权威性:引用域名和域名评分可以增强说服力,尤其是当页面同时被频繁引用且具有相关性时。
- 关系:你或同事是否认识作者?是否有人可以引荐?该媒体/网站之前是否回复过你们?例如,在我们的推广活动中,Glen 之所以适合联系某个网站,是因为他已经与对方建立了联系。另一个案例中,引用来自一位我们已有合作关系的网红,因此由合作伙伴关系团队负责外联最为合适。
其中一些信息可以在 Brand Radar 中找到:
如果你在使用我们的 Letaido 应用,数据会从 Brand Radar 拉取,并直接显示在受影响页面旁边:

找到合适的联系人
找到需要联系的网页后,下一步就是确定实际负责该页面的人。
对于少量页面,AI 助手中提供的标准网页抓取工具通常就足够用来抓取页面,并查找作者或联系方式信息。
不过规模一大,逐个检查 URL 很快就变得不切实际。通常,会需要使用 Apify 这类页面抓取 API,或其他能获取页面 HTML 的来源。
我们的应用会优先尝试使用 Ahrefs 存储的网页快照。如果不行,则会尝试通过 Apify 获取信息;如果在引用的页面上找不到联系方式,应用就会(在存在链接的情况下)跳转到作者页面,并再次查找。

从文章署名的作者入手。先查看文章署名和作者页面,如果还需要联系方式,再去看对方的 LinkedIn 或 X 个人主页。
如果找不到作者,或者该作者已不在岗,请向上查找一级。对于媒体网站来说,可以联系编辑或内容负责人;对于小型公司来说,创始人或营销负责人可能是最佳联系人。
如果其他方式都行不通,最后可以尝试通过公司的通用联系方式或客服渠道联系对方,并请对方将你的消息转交给负责该页面或内容的人员。
HeyReach、BuzzSumo 等工具可以帮助补全缺失的联系信息,并找出适合联系的潜在人选。其中许多工具都提供 API 或 MCP 接口,因此你可以将它们的功能整合到 AI 辅助工作流程中。
发送一条友好的更正请求,并跟进一次
外联时应保持友好、以提供帮助为主,而不是提出强硬要求。你可以感谢对方介绍了你的产品,指出一两处具体错误,附上可靠的来源链接以佐证正确信息,并明确表示对方无需有压力,可以自行决定是否更新页面。
举个例子,以下是我们之前发送过的一条消息:

这降低了发起对话的门槛,不过效果可能会打折扣,因为你是在要求收件人先回复,然后他们才能看到这次更正的价值。
如果没有收到回复可以再跟进一次。之后,就转向列表中的下一个页面。我们发送的部分跟进消息确实起到了作用。

关于外联,再分享几条实用建议:
保持友善的态度。不要指责作者传播错误信息,也不要以损害其声誉相威胁。
不妨假设该页面只是过时了,而不是作者存心误导。
明确提出具体的修改要求。一条经核实的更正,比一长串抱怨更容易让对方采取行动。
如果你需要发送更多私信,或在没有既有联系人关系的情况下进行跟进,可以考虑使用 LinkedIn Premium 或 Sales Navigator。Sales Navigator 还允许你在对方尚未阅读首条消息的情况下继续发送跟进消息。
至少应跟踪以下信息:URL、联系人、外联日期、渠道、待修正的说法、对方的回复、后续跟进情况,以及已确认完成的变更。
- 另外,为了以防万一,你可以在开展外联前先对页面截图。如果通过联系表单发送消息,请保存提交成功的凭证。如果你使用 Ahrefs,可以借助 Site Explorer 记录页面在不同日期之间的变化。
AEO 外联实践效果如何
我们就文章中不准确的信息联系了 26 位作者。14 位作出了回复(53.8%),6 位在其页面上做出了我们能够核实的更正(23%)。
这件事目前仍在推进,当然,作者并没有义务做任何改动。尽管如此,能让将近四分之一的文章得到更正,已经算是相当不错的结果了。
这是其中一个外联目标页面修改前后的对比(可通过Ahrefs的Site Explorer查看差异视图)。
没错,尽管我们没能找出所有需要更新的页面,但更新页面确实也为 AI 答案引入了正确的事实信息。下面是一个例子(特别感谢 thatmarketingbuddy.com 的 Joonas 提供帮助):
另外两位作者表示会做出修改,但在我们复核结果时这些修改仍未落实。因此,我们没有将其计入已确认的更正数量。
在 26 位联系人中,有 12 位没有回复。
我们从未遇到过明确拒绝更新文章的情况。但有些作者表示,只有我们提及或推广他们的产品作为回报,他们才愿意更正。我们拒绝了。我们认为,确保已发布的信息准确无误本身就应该是值得做的事,而以此作为交换条件,对那些不求回报、主动更正内容的作者来说也不公平。
这次外联也让我们发现了自身说明中存在的问题。部分误解源于我们对 Brand Radar 的定价和功能限制的描述不够清晰。这也让我们意识到,自己同样有需要改进的地方:让撰写产品相关内容的人更容易理解产品到底包含哪些内容。
相比让对方做出修改,获得回复要容易得多。在规划这项工作时,需要牢记这一点。你需要预留时间,检查对方承诺的更新是否落实,同时也要做好部分邮件石沉大海的准备。
为什么错误的 AI 答案短期内不会消失
我认为,只要做一处改变,就可以让这个问题在很大程度上消失:AI 助手应该直接从品牌自身获取有关该品牌的基本事实信息。至少,当某项说法来自第三方且未经核实时,AI 助手应该明确标注这一点。我们的 Xarumei 实验表明,如果 AI 搜索不考虑网络环境中存在的对抗性时,其结果可能会变得多么荒唐。
在科技公司做出这一改变之前,关于品牌的不准确信息仍将是个问题——也说明 AI 助手还有很长的路要走。
ChatGPT 可能已经在采取措施来提升答案质量。例如,它似乎会在扇出查询中加入“官方”之类的词,并使用“site:” 运算符从特定网站(包括品牌官网)抓取信息。Lily Ray 在她的文章中对此有更详细的介绍。
新的错误也会不断出现。人们会继续使用 AI 生成内容,因此现有错误会被反复传播,而 AI 在信息缺失时编造内容,又会引入新的错误。这些页面随后又会成为更多 AI 生成内容的信息来源,形成臭名昭著的垃圾内容循环。
顺便说一句,我们自己也曾有过类似的经历。在我们的自我推广实验期间,一家竞争对手曾要求我们更正 AI 在我们自己的内容中引入的一处错误。尽管我们进行了人工审核,并尽力确保引用的信息都经过核实,但这样的错误仍然发生了。
如何减少未来 AI 答案中出现的不准确信息
你控制不了 AI 助手怎么回答,但你可以让正确信息更容易被它们以及其他所有人找到。
确保你自己的产品信息明确无歧义
清晰地说明定价、套餐限制和功能的可用情况。如果你自己的文案存在模糊之处,第三方和 AI 系统就会自行填补信息空白,而且可能会出错。不要重蹈我们的覆辙,正是这个错误导致外界出现了许多关于 Brand Radar 的不准确信息。
让现有内容与时俱进
你自己的网站也可能成为过时信息的来源。当定价或套餐组合发生变化时,要更新那些提到相关内容的旧文章。我们在审核中,就在 Ahrefs 自己的网站上发现了三处错误。

文档和帮助内容也可能是 AI 搜索的重要信息来源。为了说明这一点,我以三星为例,查看了它的 AI 引用来源。我发现,大约有一半来自支持文档和购买指南。三星并非个例:我们在许多品牌上都看到了类似的模式,即实用的第一方内容经常被 AI 答案引用,也会被 AI 智能体使用。
三星的 AI 引用来自哪里
按 URL 模式统计的 AI 引用占比,并按引用率排序。数据范围:三星域名中被引用次数最多的 1,000 个页面。

来源:Ahrefs(经由 Letaido 获取)
主动式品牌监测
这意味着需要持续监测全网的品牌提及情况,并在发现不准确信息时快速响应。根据我的经验,内容创作者通常最关注刚发布的内容,因此,尽早联系他们,更有可能促使他们修正页面内容。
当然,这并不能保证一定有效。你无法确定某个特定页面是否会被 AI 答案引用。但及时采取行动,或许能防止错误信息出现在部分 AI 回复中。
你还可以寻找一些迹象,判断某个页面是否更有可能被引用。页面的 DR、声誉以及与目标主题的相关性,都可以作为有效的参考指标——尤其是在细分领域中,且网络上相关页面寥寥无几的情况下,这些指标就更有参考价值。内容的新鲜度也很重要,特别是当一个新页面所提供的信息比 AI 系统目前正在引用的来源更为前沿、更新时。
你可以使用 Firehose 这样的工具来设置品牌提及监控。
也可以通过 API 接入你的智能体,让它在找到每个新来源后立即自动核查事实,从而实现近乎实时的监测。
发布者须知
如果你需要维护对比类文章或价格类文章,可以将更新流程自动化。Kamila Olexa 搭建了一套自动化流程,能够监控竞争对手的定价页面、提取最新的套餐档位、找出所有提及这些信息的文章,仅重写其中的价格相关部分,并在发布前通过 Slack 请求审核批准。具体运作方式见这里。
结语
网络提及已经成为一种"货币"。想让自己的名字出现在某些页面上需要花钱,而且显然,想让品牌被准确地呈现,同样可能需要花钱。这一点很重要,因为品牌在网上的哪些地方被提及、以及这些提及具体说了什么,会对你在 AI 答案中的可见度产生巨大影响。
正因如此,像我们这样能自动发现并修复不准确信息的应用才会这么有用。但我们也发现,除非你愿意为别人更新你品牌的信息提供一些回报,否则可能很难有太大进展。
然而,一个更严重的问题亟待 AI 开发者去解决:当 AI 系统回答有关品牌的问题时,究竟如何选择所信任的信息来源?就目前而言,这一机制实际上对各方都没有什么益处。
我们不能指望每一位内容创作者或网站所有者都时刻核实信息,并随时更新关于每家公司的信息。但我们可以期待企业主动维护自身信息的准确性。毕竟,这符合企业自身的利益——错误或过时的信息可能会直接损害企业的经营。
AI 系统应该更善于识别这一点。对于企业的基本事实信息,企业自身提供的准确且最新的信息,应当比第三方网站上过时的提及信息更有分量。

Mateusz Makosiewicz 是 Ahrefs 的营销研究员和营销教育专家。他从事营销工作已有 15 年以上,专注于增长营销、内容营销、营销策略与管理。
Mateusz 曾就读于格但斯克大学,主修广告与媒体营销。他曾在广告代理机构、SaaS 公司和硬件公司任职,积累了丰富的营销经验,从管理客户的广告项目,到领导营销部门,担任过多种职务。
他基于自身经验,在 Ahrefs 博客上撰写 SEO 和营销的相关内容。这些经验均来自他对几乎所有发布过的营销建议的测试、硅谷创业营销中反复试错,以及对增长引擎近乎拼命的优化。
浏览所有 AEO 指南
什么是答案引擎优化(AEO)?
从这里开始。了解 AEO 是什么、它与 SEO 有何不同,以及入门的七个步骤。
答案引擎的工作原理
了解提示词与答案之间的运作过程,以及你的品牌可以在哪些环节切入。
如何追踪 AI 可见度
看不见,就无从优化。七种方法,帮你衡量品牌在 AI 答案中的曝光情况。
如何选择要跟踪的最佳提示词
跟踪提示词集群,而非单次回复。11 个渠道,帮你找到值得持续监测的查询。
如何针对答案引擎优化内容
排名让你进入候选范围,而以下方法才能获得引用——包括有效的主题、内容形式和页面优化调整。
如何监测并赢得 AI 答案中的品牌提及
AI 会推荐它在其他地方看到有人讨论过的品牌。以下介绍如何监测这些提及,并赢得更多提及的方法。
如何针对答案引擎优化网站
决定 AI 能否访问你的页面、读取内容并识别你的身份的技术性修复措施。
如何发现并修复 AI 答案中的错误
通过溯源问题来源、纠正错误信息、提升品牌在 AI 搜索中的可见度,来发现并修复不准确的 AI 答案。













