在计算机科学论文中,问卷数据的收集与信效度检验是确保研究结论可靠性的关键步骤。我们实验室在分析某算法框架时发现,许多研究者忽视了问卷量表的设计规范,导致回收的数据无法通过信效度检验。例如,在2023年一项关于深度学习模型可解释性的研究中,我们收集了420份来自科技企业的样本,但初始问卷的克隆巴赫系数仅为0.62,远低于0.7的阈值。经过重新设计量表,将问题从15题精简至10题,并采用李克特7点量表,最终系数提升至0.85。
问卷设计应遵循以下原则:首先,问题需与算法框架的变量直接相关,例如自变量为模型复杂度,因变量为可解释性评分。其次,避免引导性措辞,如“您是否认为该模型具有高可解释性?”应改为“请评价该模型的可解释性(1-7分)”。最后,样本数要求通常为变量数的10-20倍,对于包含5个变量的研究,至少需要50-100份有效问卷。
信效度检验包括内部一致性信度(克隆巴赫系数)和结构效度(探索性因子分析)。克隆巴赫系数的计算公式为:$\alpha = \frac{k}{k-1} \left(1 - \frac{\sum_{i=1}^k \sigma_{Y_i}^2}{\sigma_X^2}\right)$,其中k为题目数,$\sigma_{Y_i}^2$为第i题方差,$\sigma_X^2$为总方差。我们建议在正式分析前,使用SPSS或R语言进行预测试,确保系数大于0.7。