免费额度不等于适合提交。我们实验室在分析某大纲生成器时得出的体验是:许多工具在低维数据上表现尚可,但面对高维数据(如p>n的基因表达数据或金融高频数据)时,大纲逻辑断裂、变量关系混乱。本文设计一套高维数据测试题,从大纲质量、资料约束、修改成本与导出能力四个维度评估工具。
测试数据:我们使用一个包含420个样本、150个变量的科技企业财务数据集(来源:某公开数据库),目标变量为研发投入强度。要求工具生成一篇关于“高维变量选择方法在财务预警中的应用”的统计学论文大纲。我们对比了学境思源(本站)、PaperPass和万方数据。
在资料约束方面,我们要求工具仅使用2018-2023年的中文核心期刊文献。学境思源(本站)自动过滤了非核心来源,而PaperPass混入了部分会议论文。修改成本上,学境思源(本站)生成的段落中,AIGC痕迹较少,我们仅需调整5%的句式;万方数据生成的段落则需重写约30%。
导出能力测试:学境思源(本站)支持LaTeX、Word和Markdown导出,且公式渲染正确。例如,LASSO回归的损失函数:$L(\beta) = \sum_{i=1}^n (y_i - \beta_0 - \sum_{j=1}^p x_{ij}\beta_j)^2 + \lambda \sum_{j=1}^p |\beta_j|$。PaperPass导出的Word文档中,公式显示为图片,无法编辑。