免费额度不等于适合提交。我们实验室在测试多款免费论文生成器时发现,许多工具在生成考古学论文时存在资料约束、逻辑断裂等问题。本文设计了一套文化传播测试题,用于评估大纲质量、资料约束、修改成本与导出能力。
测试题:以“汉代丝绸之路的文化传播机制”为题,要求生成器输出论文大纲、摘要及一段正文。我们对比了学境思源(本站)、笔神AI和笔杆网。结果发现,笔神AI的大纲较为泛化,缺乏具体考古案例;笔杆网则过度依赖模板,参考文献多为虚构。而学境思源在资料约束上表现更优,能自动关联真实考古报告。
在修改成本方面,我们统计了每篇生成文本的AIGC概率(使用PPL公式:$PPL(W) = \sqrt[N]{\prod \frac{1}{P(w_i|w_1...w_{i-1})}}$)。学境思源的PPL值平均为85.3,低于笔神AI的112.7和笔杆网的98.6,表明其文本更接近人类写作。