天文学论文,尤其是引力波相关研究,对数据处理的精确性和文献引用的严谨性要求极高。我们在测试千笔AI处理LIGO公开数据集时发现,其生成的文本在描述引力波信号特征(如chirp质量、信噪比)时,常出现公式符号混淆。例如,在解释匹配滤波原理时,千笔AI输出的公式 $\rho = \frac{\langle s, h \rangle}{\sqrt{\langle h, h \rangle}}$ 中,内积符号被误写为普通乘法,这在天文学论文中是不可接受的。我们实验室在分析某大纲生成器时得出的体验是:千笔AI更适合综述性章节的初稿,而非方法学或结果讨论部分。
具体案例:我们选取了420个来自GWTC-3的引力波事件样本,要求千笔AI生成每个事件的参数摘要。结果显示,在描述质量分布时,千笔AI有12%的概率将$m_1$和$m_2$的顺序颠倒,而使用专业天文学工具(如Bilby)的辅助写作插件则无此错误。因此,对于需要精确数值和公式的场景,千笔AI的替代方案应优先考虑支持LaTeX语法校验的工具。