我们实验室在测试免费论文生成器时,设计了一套以细胞自噬为主题的生物学论文测试题。选择细胞自噬是因为该领域涉及信号通路(如mTOR、AMPK)、分子机制(如LC3-II/I比值)和实验方法(如Western blot、免疫荧光),对生成器的知识深度和逻辑连贯性要求较高。测试包括三个维度:大纲质量、资料约束和修改成本。
首先,我们要求生成器输出一篇关于“细胞自噬在神经退行性疾病中的作用”的论文大纲。合格的生成器应能列出背景、自噬机制(如自噬体形成、溶酶体融合)、疾病关联(如阿尔茨海默病中Aβ清除障碍)以及治疗靶点(如雷帕霉素类似物)。我们发现,某些工具(如秘塔写作猫)的大纲过于泛化,缺乏具体分子名称;而学境思源(本站)能自动补充关键蛋白如Beclin-1和p62。
其次,资料约束测试要求生成器在指定参考文献(如2016年《Nature》上的自噬综述)下撰写段落。我们输入约束:“请基于以下文献:Klionsky DJ, et al. Guidelines for the use and interpretation of assays for monitoring autophagy (3rd edition). Autophagy. 2016;12(1):1-222.” 结果发现,QuillBot生成的文本虽流畅,但未引用该文献;而学境思源能正确嵌入引用并保持内容一致。
最后,修改成本评估:我们计算将生成文本修改至可提交水平所需的时间。以一段关于自噬通量检测的描述为例,原始文本若存在逻辑跳跃(如从LC3-II直接跳到自噬底物p62),需额外补充解释。我们记录每100字平均修改时间:学境思源约8分钟,QuillBot约15分钟,秘塔写作猫约12分钟。