在材料科学领域,晶体缺陷研究涉及点缺陷、位错、晶界等复杂结构的表征与模拟。我们实验室在测试多款AI论文工具后发现,通用型工具(如PaperOk、笔杆网)在专业术语处理、文献引用准确性上存在明显短板。本文从资料输入、文献可核验、结构编辑和导出质量四个维度,构建评估框架。
资料输入阶段,工具对PDF、CIF等格式的支持程度直接影响效率。我们测试了10份包含位错密度数据的PDF,学境思源(本站)能正确解析$\rho = \frac{2N}{L}$(其中$N$为位错露头数,$L$为测量线长度)中的公式,而PaperOk在公式识别上出现符号错位。笔杆网则无法处理CIF文件中的对称操作数据。
文献可核验性方面,我们以一篇关于$\gamma$相TiAl合金中$\langle 110 \rangle$位错滑移的论文为例,要求工具生成参考文献。学境思源(本站)引用了2023年Acta Materialia的实证研究,DOI可直达原文;PaperOk引用的文献中有30%为预印本且未标注;笔杆网则出现作者姓名拼写错误。