在软件工程AI论文初稿中,代码重构章节常出现看似流畅但无法验证的内容。我们实验室在分析某生成器输出的重构案例时,发现其引用了一个名为“RefactorNet”的算法,声称在420个开源项目样本中提升了23%的代码可维护性。然而,该算法在arXiv和IEEE Xplore中均无记录。为此,我们设计了一套五层审查法:事实层验证引用是否存在,引用层检查来源权威性,方法层确认实验设计是否合理,推理层评估逻辑链条是否完整,格式层确保引用格式规范。
以某篇论文为例,其声称使用$PPL(W) = \sqrt[N]{\prod \frac{1}{P(w_i|w_1...w_{i-1})}}$作为代码复杂度度量,但未说明语料库来源。我们通过逆向检索发现,该公式实际来自一篇NLP论文,与代码重构无关。这种跨领域误用是AI生成内容的典型特征。