博客

作者:Kevin

ChatGPT 能自己核查自己吗?6 步核实清单(2026)

ChatGPT 能发现自己的一部分错误,但也可能把错误原样再说一遍。这份 6 步清单教你对照真实来源,核实 AI 给出的答案。

桌上并排竖立的一排旧书,从侧面拍摄

ChatGPT 可以部分地自己核查自己。你让它重读一遍答案,并标出没把握的说法,它能发现一些错误。但检查的人和写答案的是同一个模型,所以它可能更自信地重复同一个错误,而且没有的来源它也打不开。凡是你打算发出去、发布或依赖的内容,都把它的自查当作第一遍筛查,然后再对照外部来源核实人名、数字、日期和引语。

让 ChatGPT 做事实核查,会发生什么

2023 年,PolitiFact 用自己做过的 40 条事实核查测试了 ChatGPT。模型给出的评级大约有一半和 PolitiFact 一致。问题换个问法,答案就会变;它有时拒绝给出评级,拿不出任何来源,还出过一个计算失误,直接把一条结论弄反了。PolitiFact 的专家认为,这个模型有时能帮上忙,但离可靠的事实核查员还差得远。

那次测试用的是较早的免费版本,之后模型进步了不少,尤其是能联网搜索的时候。但真正站得住脚的结论和版本无关,而在于方法:模型给自己判作业,盲区也是同一批。所以下面的步骤都会把你带到聊天窗口之外的来源。

核实 AI 答案的 6 步清单

  1. 列出可核查的说法。 通读答案,把每个人名、数字、日期、引语、“研究表明”、法律、价格和地点都划出来。观点和建议不用这么查,事实才要。
  2. 按出错的代价排序。 一个形容词用错无伤大雅,但客户报告里的统计数字错了,或者简介里的日期错了,就不一样了。先查代价高的。
  3. 让模型说出它的疑虑,别让它给你打包票。 用下面的提示词。问“这对吗?”往往只会得到一句“对”,让它按把握程度给说法分类,你就得到一份值得去追的短清单。
  4. 为每条说法找到一手来源。 也就是研究本身、公司自己的页面、政府或标准数据库,或者最初的文章,而不是另一个转述它的网站。三个博客都在说的同一件事,可能全都源自同一个错误。
  5. 打开模型给出的每一条引用。 看看链接能不能打开、页面是否存在、内容是否真的像答案说的那样。一条参考文献可以看上去完美无缺,却根本不存在。找不到的话,就删掉这条说法,或者换成你能找到来源的。
  6. 改好文本,然后再读一遍。 更正错误的说法;确认不了的,标注为未经证实或者直接删掉;想保留的来源补上。然后从头到尾再读一遍,因为修改之后常常会留下别扭的接缝。

一个专门要求“说出疑虑”的提示词

在你想核查的答案后面,把这段贴进去:

把你上一条回答里的每一个事实性说法,用编号列表列出来。给每一条标注:确定、不确定或猜测。对于不确定和猜测的,告诉我什么样的来源可以证实它。不要添加新的说法,也不要为原来的措辞辩解。

这不会让答案变成真的。它只是让薄弱的地方显出来,让你把时间花在对的那几行上。“确定”的那些也别直接放行,抽查一下。

一个实际例子

下面这段 AI 风格的文字里有三条说法:

埃菲尔铁塔于 1887 年为巴黎世界博览会建成。成年人的身体有 206 块骨头。大多数人只用到了大脑的 10%。

说法核查结果处理
1887 年建成铁塔于 1889 年为 1889 年世界博览会建成,1887 年是开工时间。改正日期
成人有 206 块骨头解剖学参考资料中的标准数字保留,并引用参考资料
大脑只用了 10%流传已久的误区删掉,或者说明这是个误区

注意,错误的日期和那个误区读起来都很顺,语气上一点破绽也没有。这正是要逐条核查、不能凭感觉的原因。

在 Unflag 里怎么做

如果你不想自己一条条去搜,事实核查可以帮你跑腿:

  1. 打开事实核查并登录。它属于 Unflag Plus,免费账户无法使用。网页版至少需要 50 个词,Plus 每次最多可输入 10,000 个字符。
  2. 粘贴 AI 的答案或你的草稿,然后点“核实”。
  3. Unflag 会提取文本中的论断,逐条联网搜索,并给出整体结果,包括置信度、摘要、每条论断的分析和来源。
  4. 每条论断都会得到一个结论:真实、虚假、部分真实、误导性或无法核实。
  5. 对重要的论断,打开它背后的来源。结论只是供你确认的线索,不能代替你亲自读来源。
  6. 改好文本之后,再用重写(比如“改善写作”)或 AI 人性化,让修正后的稿子读起来像你写的。AI 人性化会尽量保留价格、百分比这类数字,但任何改写之后,都请再核对一遍数字。

截至 2026 年 10 月,Unflag Plus 在网页上是每月 8.99 美元或每年 45.99 美元。应用内按周或按年,通过应用商店扣费。

模型最容易出错的地方

下面这些要格外小心:

  • 引用和链接。 标题、作者、期刊和网址都可能被编得像模像样。
  • 精确的数字。 百分比、价格、日期和数量,很容易差一点点。
  • 引语。 模型给了一句话和说话的人,就到原文里找出来。
  • 最近发生的事。 凡是在模型训练数据之后的内容,除非它去搜索了,否则可能缺失或出错。
  • 小众或本地的事实。 小公司、地方法规和专业领域背后的训练数据更少。
  • 医疗、法律和理财建议。 可以用模型来准备问题,答案则要去问有资质的专业人士或看官方来源。

这份清单做不到的事

没有任何工具能保证抓出所有错误,Unflag 也一样。联网搜索的事实核查,受限于它能搜到什么,而“无法核实”的意思就是字面上的那样,并不等于“虚假”。核查事实和检查文风也是两回事:如果你担心的是一篇 AI 草稿读起来怎么样,我们那篇讲AI 检测器的分数是什么意思、怎么弄清你的学校用哪一个的文章讲的就是这一面。另外,如果你的课程或公司有 AI 使用规定,请照着做,包括是否需要说明用过 AI 的那一条。

这篇文章是怎么写出来的

我们读了 PolitiFact 公开的测试,把这些步骤和 Unflag 产品里的事实核查流程及其代码做了对照,并核对了 2026 年 10 月的 Unflag 价格。文中的实际例子是专门为这篇文章写的,没有附上任何工具的输出结果。

一句话总结:先让 ChatGPT 列出它的疑虑,再到一手来源里核实重要的说法,说法太多处理不过来的时候,再用事实核查。

常见问题

ChatGPT 能自己核查自己吗?

能做一部分。如果你让它重读一遍答案,并标出没把握的说法,它能发现一些错误,尤其是明显前后矛盾的地方。但检查者和写答案的是同一个模型,所以它可能更自信地重复同一个错误。可以把它当作初筛,再去外部来源核实人名、数字、引语和日期。

ChatGPT 为什么会编造来源?

语言模型写的是最像样的下一个词,而一条像样的引用,就是作者、标题加年份。除非开启了搜索工具,否则它并不是在查资料。所以一条参考文献可以读起来天衣无缝,实际上根本不存在。一定要自己点开链接,或者搜一下标题。

用什么提示词能让 ChatGPT 核查自己的答案?

让它把上一条回答里所有可以核查的说法列出来,分别标成确定、不确定或猜测,并说明什么样的来源可以证实。不要问“这对吗?”,那样很容易换来一句“对”。然后挑出不确定和猜测的部分,自己去核实。

发布 AI 写的文章之前,怎么做事实核查?

把所有人名、数字、日期、引语和“研究表明”之类的句子都挑出来,再到一手来源逐条确认,比如原始研究、公司自己的页面或官方数据库。确认不了的就改掉或删掉。最后再把稿子润色一遍,让它读起来像你写的。

Unflag 能核查 AI 文本的事实吗?

可以。Unflag Plus 里的事实核查会提取你文本中的论断,逐条联网搜索,并给出结论、置信度和来源。它也可能出错,所以在依赖某个结论之前,请先打开列出的来源看一看。免费账户无法使用。

统计数据和引语可以放心相信 ChatGPT 吗?

不行,不核实就不能信。统计数据、引语、法律或医疗细节、最近发生的事,以及任何带精确数字的内容,都是模型最容易出错的地方。把它们当作线索,找到原始来源,来源说的一样才保留。

更多 Unflag 文章

查看全部