我们实验室在测试千笔AI处理建筑学论文时,发现其生成的空间形态描述往往停留在通用层面。例如,当输入“分析某文化中心的空间序列”时,千笔AI输出的内容多为“空间开合有致、节奏变化丰富”这类泛化表述,缺乏对具体尺度、比例、视线通廊等专业参数的量化分析。这源于其训练数据中建筑学专业语料占比有限,且缺乏对空间句法(Space Syntax)等分析方法的深度理解。
在可复现任务中,我们要求千笔AI生成一个包含整合度(Integration)和可理解度(Intelligibility)指标的空间句法分析段落。其输出结果中,$Integration = \frac{2(MD-1)}{(k-2)}$ 这一公式被错误地写为 $Integration = \frac{MD-1}{k-2}$,导致后续解释偏离正确逻辑。这表明千笔AI在专业公式的准确性和上下文关联性上存在明显短板。
对于建筑学论文中常见的“空间形态与行为关联”研究,千笔AI倾向于引用非建筑学领域的文献,例如将环境心理学中的“唤醒理论”直接套用,而未考虑建筑空间中的具体变量(如路径选择概率、停留时长等)。我们在分析420个样本的校园广场使用后评估(POE)数据时,千笔AI生成的结论与实测数据拟合度仅为0.32,远低于人工撰写的0.78。