在近期的一项实验中,我们实验室对42篇天文学研究生论文进行了AIGC检测。结果显示,超过68%的论文在星系演化描述段落中检测出高比例AI痕迹。这些段落通常包含大量标准化的学术表达,如“研究表明”、“数据表明”等,这些模式容易被AI检测模型捕捉。我们分析发现,AI检测模型通常基于困惑度(Perplexity)和突发性(Burstiness)等指标。例如,困惑度公式为 $PPL(W) = \sqrt[N]{\prod \frac{1}{P(w_i|w_1...w_{i-1})}}$,低困惑度文本往往被判定为AI生成。因此,降低AI率的关键在于增加文本的统计多样性。
我们实验室在测试某大纲生成器时发现,直接使用大模型生成的初稿,其困惑度通常低于20,而人类撰写的学术论文困惑度在40-60之间。为了弥合这一差距,我们开发了一套“深度去AI痕迹”工作流,包括:1)手动插入非典型句式;2)引入领域特定术语的变体;3)调整段落间的逻辑跳跃度。以一篇关于“星系并合触发恒星形成”的论文为例,原始AI生成文本为“星系并合过程会触发剧烈的恒星形成活动”,我们将其改写为“当两个星系发生并合时,其气体云碰撞产生的激波可能压缩分子云,进而引发恒星形成爆发——这一过程在近邻并合星系中尤为常见”。改写后,困惑度从18升至47,AI检测率从82%降至23%。