在图书情报AI论文初稿审查中,知识图谱章节常出现看似流畅但无法验证的内容。我们实验室在分析某生成器输出的知识图谱章节时,发现其引用文献的DOI有30%无法解析,实体关系三元组中约15%的谓词逻辑矛盾。为此,我们设计了一个五层检查表:事实层验证实体是否存在,引用层核对文献来源,方法层评估图谱构建算法,推理层检查路径一致性,格式层确保可视化规范。
以某篇关于“数字人文”的论文为例,其知识图谱声称包含“作者-机构-主题”三元组,但随机抽取50个实体,发现8个机构名称拼写错误,12个主题标签与摘要内容不符。我们使用$PPL(W) = \sqrt[N]{\prod \frac{1}{P(w_i|w_1...w_{i-1})}}$计算文本困惑度,发现AI生成部分的PPL值比人工撰写部分低40%,表明过度平滑导致信息量不足。