我们提出一套五步核验流程,适用于电路拓扑等电子信息论文的AI参考文献检查:
第一步:题名核验。将文献题名输入Google Scholar或IEEE Xplore,检查是否存在完全匹配的条目。若题名过长或包含特殊符号,可截取核心关键词搜索。例如,题名“A Novel High-Efficiency LLC Resonant Converter with Adaptive Frequency Control”应能直接检索到原文。
第二步:作者核验。核对作者姓名、顺序及所属机构。AI常混淆相似姓名(如“J. Wang”与“J. Wong”),或虚构合作者。我们曾发现一篇引用“K. Kim et al.”的文献,实际作者为“K. Kim”单独发表。
第三步:年份核验。确认出版年份与期刊/会议的实际年份一致。AI可能将2020年的论文误标为2022年,或引用尚未出版的“未来”论文。
第四步:DOI核验。通过doi.org验证DOI的有效性。AI生成的DOI常为随机字符串或指向其他文献。例如,DOI“10.1109/TPEL.2021.3051234”若无法解析,则高度可疑。
第五步:原文论点核验。这是最关键的步骤。需找到原文,确认其是否确实支持论文中引用的论点。例如,若论文声称“文献[5]证明LLC变换器效率可达98%”,则需在原文中定位该数据。我们在一项案例中发现,AI引用的“效率98%”实际来自另一篇不同拓扑的论文。
为量化核验效率,我们定义公式 $PPL(W) = \sqrt[N]{\prod \frac{1}{P(w_i|w_1...w_{i-1})}}$ 用于评估AI生成参考文献的困惑度(perplexity)。低困惑度(如<10)通常意味着文献更真实,但并非绝对。在实际测试中,真实文献的平均PPL为8.2,而虚构文献为15.6,差异显著。