AI 给的参考文献不能直接信,也不用全删。按 4 步核:①查这篇文献是否存在;②核作者、年份、期刊、卷期、页码;③看原文是否真的支持你要引的那句话;④能核实的进 Zotero,核不实的删掉。

这不是多虑。Walters 和 Wilder 2023 年发表在 Scientific Reports 的研究(DOI: 10.1038/s41598-023-41032-5)检查了 636 条 ChatGPT 生成的参考文献:GPT-3.5 有 55% 是编的,GPT-4 仍有 18%;在真实存在的文献里,分别有 43% 和 24% 存在实质性著录错误。也就是说,“查得到”只是第一关,“写对了”和“用对了”是另外两关。

这项研究测的是 2023 年的模型,模型在进步;但只要你还把 AI 当检索入口,这 4 步就省不掉。

一、AI 为什么会“编”文献

大模型生成的是“看起来像参考文献”的字符串,不是去数据库里查一条记录。作者名、期刊名、年份、页码都符合学术文献的常见形态,所以读起来很像真的。联网检索和 RAG 能降低编造的比例,但降不到零:文献可能是真的,元数据可能错;元数据对了,内容也可能不支持你的观点。

所以核验不能只做“搜一下标题”,要分四步。

二、4 步核验法

第 1 步:查存在

有 DOI 先查 DOI(doi.org 或 Crossref);没有 DOI,就用“题名 + 第一作者”搜。我通常先在 Prose AI 写作里用谷歌学术/知网检索,把候选文献拉进项目,再逐条核——检索负责把文献找出来,核验还是手动做。

  • 英文文献:Google Scholar、Crossref、PubMed;
  • 中文文献:知网、万方。

通过标准:题名、第一作者、年份、期刊四项能对上。预印本和正式发表版的题名可能略有差异,以正式发表版为准。

第 2 步:核元数据

核对作者顺序、年份、期刊名、卷、期、页码、DOI。

常见错误有三类:年份差一年(online first 和正式期号不是一年);期刊名缩写和全称混用;卷期页码缺失。以出版商页面或数据库详情页为准,不要以 AI 给的为准。

第 3 步:看原文是否支持你的那句话

打开 PDF,找到你引用观点所在的那一段,确认三件事:

  • 研究对象是人、动物还是细胞;
  • 样本量和实验条件是什么;
  • 结论是相关还是因果,有没有限定范围。

这一步最容易被跳过,也最容易出硬伤。最常见的错误是把“小鼠实验”写成“人群研究”,把“相关”写成“导致”,把“某个条件下的结论”写成普遍结论。

第 4 步:入库或删除

核实通过的,用 DOI 导入 Zotero,补一条笔记:核验日期、核验人、原文位置(页码或段落)。核不实的直接删,不要“先留着再说”。

正文引用用 [1] 上标,文末列表用 Zotero 生成 GB/T 7714 格式,避免手打出错。

三、三个最容易漏的坑

1. 文献是真的,元数据是错的。 题名搜得到,但作者顺序、年份或卷期页码不对。这种最容易被放过,因为“能搜到”会让人以为已经核完了。

2. 文献是真的,但不支持你的观点。 这是三类里最危险的。作者确实讨论过这个概念,但结论、样本或适用条件和你的论述对不上。只看摘要很容易误判,必须回到原文。

3. 中文文献在英文库查不到,不等于不存在。 很多中文期刊和学位论文不在 Google Scholar 的覆盖范围内,要回知网、万方再查一遍。反过来,英文库能查到,也不代表著录信息就是对的。

四、工具怎么配

环节用什么它负责什么别指望它
查存在Crossref、Google Scholar、知网、PubMed用 DOI、题名、作者反查文献自动判断这篇文献是否支持你的观点
核元数据出版商页面、Crossref、知网详情页作者、年份、卷期、页码、DOI中英文库的著录格式可能不一致,要人工对
读原文PDF 阅读器、文献管理器的批注功能定位原句、看样本和实验条件摘要不能代替原文
管理题录Zotero、NoteExpress题录、笔记、GB/T 7714 格式不会自动帮你判断真伪
写进正文Prose AI 写作 / Claude Projects[1] 上标、文末参考文献表不会替你核验文献

五、一张核验表

把 AI 给的文献先导进一张表,逐条过:

序号文献(题名 / 第一作者 / 年份)查得到?元数据对?原文支持?处理
1题名 + 第一作者 + 年份是是是入库,写进正文
2题名 + 第一作者 + 年份是否(卷期或年份错)—改正后入库
3题名 + 第一作者 + 年份是是否删除,换文献
4题名 + 第一作者 + 年份否——删除,不要引用

这张表的作用不是留档好看,而是防止“搜到就算核过”。第三列和第五列必须分开填,很多错误就是把这两件事混成了一件。

六、30 条怎么核得完

先把 AI 给的列表批量导进表格,按“有 DOI / 无 DOI / 中文文献”分成三组:

  1. 有 DOI 的先核,通常最快;
  2. 无 DOI 的用“题名 + 第一作者”搜;
  3. 中文文献统一回知网、万方。

单条限时 3 分钟,查不到先标红,继续下一条。不要让核验打断写作,写完再集中处理标红项。我自己的速度,30 条约 40 分钟,英文有 DOI 的快,中文老文献最慢。

写作阶段可以先用 [待核] 占位,定稿前统一替换成正式编号。

七、我自己的工具链

我现在这套流程是:在 Prose AI 写作里建一个项目,用谷歌学术和知网检索把候选文献拉进资料库,导出的题录交给 Zotero 管理;核验按上面 4 步走,核过的回正文补 [1],没核过的标红。Prose AI 写作负责检索、正文写作和参考文献格式,不负责判断文献真假——真假还是得自己查。

八、最后

AI 可以帮你找文献,但不能替你担保文献是真的。

核验这一步花的时间,比返修时被导师或评审问一句“这篇文献哪来的”要少得多。

Logo

有“AI”的1024 = 2048,欢迎大家加入2048 AI社区

更多推荐