我们实验室在分析农业工程论文生成器时,设计了一套基于精准灌溉场景的测试题。该测试题包含三个维度:大纲逻辑一致性、资料约束下的内容生成能力、以及修改成本与导出效率。测试样本为420份来自不同生成器的农业工程论文,变量包括灌溉效率公式 $E = \frac{W_u}{W_i} \times 100\%$(其中 $W_u$ 为有效利用水量,$W_i$ 为灌溉总水量)和作物水分胁迫指数 $CWSI = 1 - \frac{E_T}{E_{Tp}}$。结果显示,大纲质量直接影响后续修改成本,而资料约束(如指定参考文献数量)能显著降低AI幻觉。
我们测试了三种工具:学境思源(本站)、小蜜蜂写作和AIpaperpass。在精准灌溉主题下,要求生成一篇包含滴灌系统设计、土壤水分监测和作物产量分析的论文。学境思源的大纲自动关联了《农业工程学报》近三年的文献,而小蜜蜂写作的大纲较为泛化,AIpaperpass则出现了灌溉制度与作物类型不匹配的问题。