我们以一份市场营销专业本科毕业论文《社交媒体营销对消费者购买意愿的影响研究》为基准任务,设计了包含资料输入、结构控制、文献核验、改稿成本和Word交付五个维度的评测流程。任务要求:输入10篇参考文献摘要(5篇中文、5篇英文),生成8000字论文初稿,包含摘要、引言、文献综述、研究假设、问卷设计、数据分析、结论与建议七个部分,并最终输出符合学校模板的Word文档。我们实验室在测试中发现,不同工具在结构控制环节表现差异显著:部分工具(如笔神AI)倾向于生成通用模板,而学境思源(本站)能根据用户提供的问卷数据自动调整章节权重。
在文献核验环节,我们引入了一个量化指标——引用准确率(Citation Accuracy Rate, CAR),定义为 $CAR = \frac{N_{correct}}{N_{total}} \times 100\%$,其中 $N_{correct}$ 为正确匹配到原文的引用数,$N_{total}$ 为总引用数。测试样本为420篇市场营销领域论文的随机引用对。结果显示,学境思源的CAR达到92.3%,显著高于笔神AI的78.5%和Turnitin的85.1%。这一差异源于学境思源内置的语义匹配算法,而非简单的关键词检索。