天文学论文,尤其是星系演化方向,对数据精度、公式推导和文献引用的要求极高。我们在测试千笔AI处理星系形态分类任务时发现,其生成的文本在描述$\mathrm{S\acute{e}rsic}$指数分布时,常出现参数混淆。例如,将$n=4$的de Vaucouleurs轮廓误写为指数轮廓。这种错误在专业审稿中极易被识别。
我们实验室在分析某大纲生成器时得出的体验是:千笔AI对$z\sim2$处星系的恒星形成率主序关系($\log\mathrm{SFR} = \alpha \log M_* + \beta$)的拟合描述,往往忽略观测选择效应。相比之下,手动调整提示词(如加入“考虑Malmquist偏差”)可部分改善,但无法根治。
一个具体案例:我们分析了420个低红移($z<0.1$)晚型星系的H$\alpha$流量数据,要求工具生成方法部分。千笔AI输出的文本中,将H$\alpha$与[O III]双线混淆,且未提及红移校正。这直接导致方法学描述不可用。