知识专栏
核查 AI 回答:如何识别和避免幻觉
简要说明
幻觉是指听起来令人信服、实际上却错误或完全捏造的 AI 回答。它之所以出现,是因为语言模型是在把可能性最高的词一个接一个地串起来,而不是去查证事实。因此,每一条重要的说法都要核查:要求给出来源,亲自打开来源,核对数字和引文。在健康、法律和金钱问题上,AI 只能做前期准备,做决定时应依靠可靠的来源或专业人士。
你向 AI 询问一项研究,得到了标题、作者和发表年份,一切听起来都很可信。直到你去搜索时才发现:这项研究根本不存在。这不是偶尔的失误,而是所有 AI 助手都有的一个已知弱点,无论是 ChatGPT、Claude 还是 Gemini。这并不意味着你完全不能信任 AI。你只需要一套简单的核查流程。在这里你会了解到错误是怎么产生的、如何识别它们,以及如何只用几个简单的步骤就避免它们。
什么是 AI 幻觉?它为什么会出现?
当 AI 信心十足地断言某件错误的事情时,就称为幻觉。它可能是一个错误的年份、一段捏造的引文,或者一本从未出版过的书。AI 并不是故意撒谎,它只是根本没有意识到自己错了。
原因在于它的工作原理。大语言模型从海量文本中学到的是:哪个词最有可能接在后面。它并不会去事实数据库里查证。像语法这样反复出现的模式,它能可靠地学会;而罕见的单个事实,比如一位不太知名的人物的生日,它就学不准了。这时它就会用听起来合理的内容来填补空白。
此外,根据 OpenAI 的一项研究,常见的训练和测试方法对猜测的奖励,多于对诚实地说一句“我不知道”的奖励。这就像一场选择题考试:猜一个答案可能得分,留空却永远不会得分。另外,没有网页搜索功能的模型只了解其训练数据截止时的情况,所以最新发生的事件它并不知道。
如何发现 AI 的回答可能有错?
幻觉乍一看和其他回答没什么两样。但下面这些警示信号应该引起你的警惕:
- 非常精确的数字、百分比或日期,却没有注明来源。
- 逐字引用的话,尤其是知名人士说的话。
- 用搜索引擎找不到的来源、研究、链接或法院判决。
- 同一个问题再问一遍,回答却变了。
- 回答内部前后矛盾,或者与你确知的事实相矛盾。
- 涉及非常新的事件、小众话题,或者不太知名的人物和公司的问题。
后果可能有多严重,美国的一个案例就说明了:那里有律师被处以罚款,因为他们在法庭上引用了 ChatGPT 凭空捏造的判决。所以,自信的语气并不能证明内容正确。
如何一步步核查 AI 的回答?
并不是每个回答都需要事实核查。为了收集创意而进行的头脑风暴,你可以轻松对待。但一旦你要转发、发布某些内容,或者要据此做决定,这套流程就很值得:
- 标出核心说法:哪些事实、数字或名字一旦出错,会让你难堪或付出代价?
- 要求给出来源:追问信息来自哪里,最好附上链接。
- 亲自打开来源:检查这个网页是否存在,以及上面是否真的写着 AI 所说的内容。
- 交叉核对:再找一个独立的来源,比如政府机构或制造商的官方网站,或者专业门户网站。
- 重新计算数字并留意时效:总数和百分比对不对?数据是什么时候的?
提示: 让 AI 以批判的眼光把回答审读一遍,最好是在新对话中,或者交给第二款助手:“请检查这段文字中的事实错误,并标出所有你无法确切证实的说法。”这样往往能发现薄弱之处,但并不能代替你亲自查看原始来源。
哪些工具能帮你为 AI 回答找到来源依据?
如果 AI 直接附上来源,核查回答就最简单了。在我们的检索工具中,你可以找到合适的帮手,其中很多是免费的:
- Perplexity:一个用来源支撑回答的 AI 搜索引擎。免费版每天可用 3 次 Pro 搜索。
- ChatGPT Search:直接在对话中进行带来源的网页搜索,免费但有限额。
- Google Gemini(Deep Research):生成多页带来源的报告,不订阅也能用,但有限额。Deep Research 是如何运作的,我们的 AI 词典里有解释。
- Gemini Notebook:你上传自己的资料,然后就这些资料提问。回答依据的是你的资料,而不是模型的通用知识。
- Elicit 和 Consensus:专门用于科学研究文献,各自都有功能受限的免费版。
如果你经常需要这样做,可以把它自动化:调研代理能针对一个主题提供带来源的简报,而基于你自己文档的知识库则会从你的文件中回答问题并注明出处。重要的是:来源标注也可能出错。有时 AI 会把一个真实的来源总结错,所以流程中的第三步永远适用。
用哪些提示词可以避免幻觉?
你无法完全杜绝错误,但借助清晰的指令,可以让错误更少出现,也更容易被发现。下面这些说法已经被证明很有效:
- “如果你对某件事不确定,请明确说出来,而不要去猜。”
- “为每个数字和每条事实注明来源,并附上链接。”
- “只根据下面这段文字回答。如果文字中没有答案,就写:文中没有提到这一点。”
- “在回答中把确定的事实与评估和推测区分开来。”
- “你的回答中哪些部分是我一定要自己核实的?”
第三个提示词特别有用:如果你把文字本身交给 AI,比如一篇文章或一个 PDF,它就不需要凭记忆去补充任何内容。更多基础知识请看指南新手写提示词指南。
哪些话题需要格外小心?
在某些话题上,一个错误就可能造成实际的损害。在这些领域,AI 只能用来做准备,绝不能作为最终依据:
- 健康:症状、药物和剂量,务必向医生或药房确认。
- 法律:各国法律不同,而且会变化。涉及合同、期限和纠纷时,可以求助律师事务所或咨询机构。
- 财务与税务:免税额、税收规定和各种条件经常变化。请向官方机构或税务顾问核实。
- 数字与统计:AI 会算错,有时也会使用过时的数据。请从原始来源获取统计数据,比如统计局。
- 引文:逐字引用是典型的出错来源。只采用你在原始来源中找到的内容。
尽管如此,AI 在这些领域也能提供有益的帮助:它能把专业术语解释得通俗易懂,还能帮你为看病或咨询准备好要问的问题。同时要注意你输入了哪些个人数据。相关建议请看 AI 工具的数据保护。
常见问题
ChatGPT 为什么会编造来源?
ChatGPT 是按照概率逐词生成文字的。一条来源标注由作者、标题和年份等典型要素构成,而模型有时恰恰会把这些要素拼凑得像模像样,实际上这个来源却并不存在。开启网页搜索后,这种风险会降低,因为它会链接到真实的网页。尽管如此,还是要亲自打开这些链接看一看。
哪款 AI 的幻觉最少?
完全没有幻觉的 AI 并不存在。错误出现的频率取决于模型、话题和你的提问,而且每次更新都会变化。与其寻找一款零错误的工具,不如选择带网页搜索和来源标注的助手更实际,因为这样你就能快速地自己核实各项说法。
AI 幻觉能被完全避免吗?
不能,但你可以大大减少它们。尽量给 AI 提供充足的背景信息,或者直接附上原文;请它坦白说出不确定的地方;并使用带来源标注的工具。之后再到原始来源中核实重要的说法。这样,一项风险就变成了一个只需几分钟、可控的检查步骤。
带来源标注的 AI 回答就一定正确吗?
不是。来源标注让核查变得更容易,但并不是保证。AI 可能把一个真实的来源总结错、把数字弄混,或者引用一个实际上说的是另一回事的网页。所以在重要问题上,请打开链接,亲自读一读相关段落。这通常只需要一两分钟。