我们设计了一套基于流行病调查的测试题,用于评估免费论文生成器的实际能力。测试主题为“城市空气污染与儿童哮喘发病率的关联性分析”,要求生成器输出完整论文大纲、摘要及一段方法学描述。我们选取了三款工具:学境思源(本站)、茅茅虫降重和秘塔写作猫,分别进行测试。
测试变量包括:样本量(n=420,来自某市三所小学的体检数据)、暴露变量(PM2.5日均浓度,单位μg/m³)、结局变量(哮喘确诊率,%)。我们要求生成器基于这些变量构建逻辑回归模型,并输出公式。学境思源生成的公式为 $P(Y=1|X) = \frac{1}{1+e^{-(\beta_0 + \beta_1 X_1 + \beta_2 X_2 + \epsilon)}}$,其中 $X_1$ 为PM2.5浓度,$X_2$ 为儿童年龄。茅茅虫降重输出的公式缺少误差项 $\epsilon$,秘塔写作猫则未提供公式。
在测试中,我们注意到学境思源对变量单位的处理更严谨,自动标注了μg/m³和年。茅茅虫降重的大纲结构较完整,但方法学部分过于模板化。秘塔写作猫的摘要生成速度最快,但内容深度不足。