第一步:题名匹配。将AI给出的题名在Google Scholar或CNKI中精确检索。例如,某AI推荐“Effects of nitrogen fertilization on wheat yield”一文,实际题名为“Nitrogen fertilization effects on wheat yield: a meta-analysis”。我们测试中,约15%的题名存在细微差异。
第二步:作者核实。检查作者姓名拼写及顺序。AI常混淆“Wang, L.”与“Wang, Li”。我们曾遇到一篇引文作者为“Zhang, Y.”,但原文作者实为“Zhang, Y. H.”。
第三步:年份校对。AI可能将2018年论文误标为2020年。例如,某AI引用“Smith et al. (2020)”,实际出版年份为2019。
第四步:DOI解析。通过doi.org验证DOI是否有效。我们分析了420篇农学引文,发现AI生成的DOI中约8%无法解析。例如,DOI“10.2134/agronj2019.04.0287”实际对应另一篇文章。
第五步:原文论点对照。阅读原文摘要或全文,确认AI引用的论点是否一致。例如,某AI声称“Jones et al. (2017) 发现氮肥增加10%使产量提升5%”,但原文结论是“在特定土壤条件下增产3%”。
案例研究:我们选取了某AI生成的20篇关于“水稻节水灌溉”的参考文献,采用上述五步法核验。结果发现:题名错误2篇,作者错误1篇,年份错误1篇,DOI无效3篇,论点不符2篇。最终可信引文仅11篇(55%)。该案例表明,AI参考文献的核验不可省略。