在审阅中国文学AI初稿时,我们采用五层审查框架:事实、引用、方法、推理和格式。以某篇分析《红楼梦》叙事结构的AI初稿为例,文本细读章节声称“前八十回与后四十回在叙事视角转换频率上存在显著差异(p<0.05)”。我们首先核查事实层:该结论是否基于原始文本统计?实际统计显示,前八十回视角转换平均每回3.2次,后四十回为2.9次,差异未达显著水平(t=1.23, df=118, p=0.22)。引用层:文中引用“张某某(2020)的叙事学理论”在知网中无法检索到对应文献。方法层:AI声称使用“LDA主题模型”分析,但未说明预处理步骤和主题数选择依据。推理层:从“视角转换频率低”直接推出“叙事动力减弱”缺乏中间论证。格式层:参考文献编号与正文引用不匹配。这五层检查能有效定位看似流畅但无法验证的内容。
我们实验室在测试某大纲生成器时发现,AI常虚构统计结果。例如,一篇关于唐诗意象演变的初稿中写道:“通过回归分析,我们发现‘月’意象的使用频率与朝代更替呈负相关($\beta = -0.34, p<0.01$)”。但实际数据中,唐代“月”意象频率为12.3%,宋代为11.8%,差异极小。这种伪统计是AI初稿的典型问题。