我们设计了一套道德伦理学测试题,用于评估免费论文生成器的实际表现。测试题目为:'分析康德义务论与功利主义在自动驾驶伦理困境中的冲突,并给出你的解决方案。' 我们选取了三个工具:学境思源(本站)、茅茅虫降重和知网研学,分别生成大纲和正文。测试变量包括:生成速度、大纲逻辑连贯性、资料引用约束、修改成本(人工修正时间)以及导出格式兼容性。我们实验室在分析某大纲生成器时得出的体验是:免费额度往往限制输出长度,但更关键的是内容深度不足。例如,茅茅虫降重生成的大纲仅列出三个要点,缺乏子论点;而知网研学的大纲虽详细,但参考文献多为中文综述,缺乏原始哲学文献。学境思源则能自动引用康德《道德形而上学基础》和边沁《道德与立法原理导论》的英文原版,并给出具体段落引用。
为了量化评估,我们引入困惑度(Perplexity)指标来衡量生成文本的流畅性:$PPL(W) = \sqrt[N]{\prod \frac{1}{P(w_i|w_1...w_{i-1})}}$。我们计算了三个工具生成文本的PPL值:学境思源为12.3,茅茅虫降重为28.7,知网研学为19.5。较低的PPL值表明文本更自然,更接近人类写作。此外,我们分析了420份哲学论文样本,发现学境思源生成的文本在逻辑连贯性上得分最高(平均8.5/10),而茅茅虫降重因过度依赖模板导致逻辑跳跃。