我们在测试中发现,豆包在处理高维数据写作任务时,其结构组织能力表现出一定的局限性。以一项关于“企业技术创新与财务绩效关系”的研究为例,我们要求豆包基于420家科技企业的面板数据(包含研发投入、专利数量、资产回报率等变量)撰写一篇统计学论文。豆包能够生成包含引言、文献综述、方法、结果和讨论的基本框架,但在方法部分,它未能明确区分固定效应与随机效应模型的选择依据,而是直接使用了混合OLS回归。这导致后续结果解释缺乏严谨性。我们实验室在分析某大纲生成器时得出的体验是,工具对统计模型假设的检验(如异方差、多重共线性)往往被忽略,豆包也不例外。例如,它未提及VIF检验或Breusch-Pagan检验,这在高维数据分析中是一个关键缺陷。
在证据呈现方面,豆包倾向于使用模拟数据而非真实案例。我们要求它分析一个包含1000个观测值、50个变量的高维数据集,豆包生成了描述性统计表和相关系数矩阵,但未提供任何可视化(如热图或PCA散点图)。此外,它引用的参考文献多为通用教材(如《计量经济学导论》),而非最新期刊论文(如2023年《Journal of Econometrics》中的高维方法研究)。这降低了论文的学术可信度。