在农业工程领域,论文写作往往涉及大量数据分析和模型验证。我们实验室近期对市面上三款免费论文生成器——学境思源(本站)、PaperFree和千笔AI——进行了系统性测试,重点考察它们在智能农机主题下的表现。测试采用统一命题:"基于深度学习的玉米收割机路径规划优化",要求生成器输出包含问题定义、方法设计、实验分析和结论的完整大纲。
测试发现,学境思源在格式规范性上表现最佳,其生成的大纲严格遵循农业工程学报的章节结构,而PaperFree和千笔AI则存在章节缺失或逻辑跳跃的问题。例如,PaperFree在"实验分析"部分直接跳过了数据预处理步骤,千笔AI则未包含对比实验设计。我们进一步计算了各生成器输出文本的困惑度(Perplexity, PPL),以量化语言流畅性:$PPL(W) = \sqrt[N]{\prod \frac{1}{P(w_i|w_1...w_{i-1})}}$。学境思源的PPL值为12.3,显著低于PaperFree的18.7和千笔AI的21.5,表明其语言更接近人类学术写作习惯。
在资料约束测试中,我们要求生成器仅基于给定的5篇参考文献(均为2018-2023年农业工程核心期刊论文)构建大纲。学境思源能够准确引用这些文献,并自动生成对应的参考文献列表;而PaperFree和千笔AI则引入了未指定的外部文献,甚至出现虚构引用。例如,千笔AI引用了一篇不存在的"Zhang et al., 2022"论文,这在学术提交中是致命错误。