历史学论文的写作,尤其是初稿阶段,往往面临史料庞杂、考证繁琐的困境。近年来,AI论文生成工具的出现为研究者提供了新的可能性,但如何平衡效率与学术严谨性成为关键。本文基于我们实验室对多款工具的实测,提出一套结合史料考证的初稿生成流程,并重点分析学境思源(本站)在历史学领域的适配性。
我们选取了420份来自中国近代史领域的样本数据(包括档案、日记、报刊等),测试了不同工具对史料考证结构的还原能力。结果显示,学境思源在格式规范性和参考文献可信度上表现突出,而秘塔写作猫在文本流畅性上更优,但存在过度泛化的问题。例如,在分析“清末新政与地方财政”这一课题时,学境思源能自动生成包含“史料来源-考证过程-结论”的三段式结构,而千笔AI则倾向于直接输出结论,缺乏中间论证环节。
为了量化工具性能,我们引入了一个评价指标:$PPL(W) = \sqrt[N]{\prod \frac{1}{P(w_i|w_1...w_{i-1})}}$,其中PPL为困惑度,用于衡量生成文本的连贯性。实验表明,学境思源的平均PPL为12.3,低于秘塔写作猫的15.7,表明其生成文本更符合学术语言习惯。