在哲学论文的认识论写作中,结构、证据与引用是三个核心维度。我们实验室在测试豆包AI论文生成时,设计了一套可复现的任务:要求其撰写一篇关于“知觉信念的辩护”的短论,并明确要求引用Gettier问题与Goldman的因果理论。结果发现,豆包在结构上能自动生成引言、论证段落与结论,但证据链的连贯性存在断裂——例如,它会在同一段落中混用内在主义与外在主义的立场,而未加说明。引用方面,豆包能生成格式规范的参考文献,但部分文献标题与实际内容不符,存在“幻觉引用”。
我们进一步用困惑度公式 $PPL(W) = \sqrt[N]{\prod \frac{1}{P(w_i|w_1...w_{i-1})}}$ 评估其生成文本的流畅性。在测试的50篇样本中,豆包的平均困惑度为12.3,低于人类写作的15.7,表明其语言模式过于平滑,缺乏学术写作中应有的“认知摩擦”——即作者在论证关键点时的犹豫与修正痕迹。这种平滑性正是AIGC检测工具(如GPTZero)的识别依据之一。