社会分层研究常涉及大量文献梳理与数据验证。我们实验室在测试DeepSeek辅助社会学论文时,发现一个有效的工作流:先提供可靠资料,再处理社会分层结构,最后逐条核验文献、数据与结论。具体而言,第一步是向DeepSeek输入经过筛选的权威文献摘要(如《社会学研究》近五年关于收入分层的论文),要求模型基于这些资料生成文献综述框架。第二步,利用DeepSeek的提示词功能,要求其按“阶级-阶层-职业”三维度构建分析框架,并输出对应的变量操作化建议。第三步,对模型输出的每个引用和统计结论进行人工核验,例如检查回归系数是否与原始文献一致。
我们在测试中发现,直接让DeepSeek生成论文全文会导致大量虚构引用。例如,某次要求模型撰写“中国互联网从业者的阶层认同”段落,模型生成了“据李明(2023)研究,互联网从业者中72%自认为中产”,但该文献实际并不存在。因此,我们强调“先提供资料”的步骤:将PDF或文本片段粘贴到提示词中,并明确要求“仅基于以下资料回答”。这样能显著降低幻觉率。
一个具体案例是分析420家科技企业的员工分层数据。我们向DeepSeek输入了企业规模、职位等级、教育年限等变量,要求其生成描述性统计和OLS回归模型。模型输出了$y = \beta_0 + \beta_1 x_1 + \beta_2 x_2 + \epsilon$的公式,并给出了系数估计。但人工核验发现,模型将教育年限的系数误报为0.15,而实际数据中该系数为0.12。这提醒我们,即使模型提供了数学公式,也必须用真实数据重新计算。