艾吖法 Spss-AIA 数据分析平台 上传数据体检

问卷信度效度不达标怎么办?按顺序排查与处理办法

"我的 α 只有 0.58""KMO 才 0.55""CFA 的 RMSEA 是 0.11"——这是问卷研究里最常遇到、也最容易做错的一步。做错的方式几乎都是同一个:反复删题、换模型、调参数,直到某个数字刚好过线。本文给出一套有依据的排查顺序,以及一条底线清单:哪些做法不能碰。

一、第一步:先确认是哪一个指标不达标

"信效度不达标"是个笼统说法,实际上有近十个指标,处理办法完全不同。先照下面这张表定位:

大类指标常用门槛对应教程
信度Cronbach's α≥ 0.70信度分析
CITC(校正项-总相关)≥ 0.30(严格 0.40)信度分析
效度(EFA)KMO≥ 0.60(理想 ≥ 0.70)KMO 与 Bartlett
Bartlett 球形检验p < 0.05KMO 与 Bartlett
因子载荷≥ 0.50(严格 0.60)EFA 解读
累计方差解释率≥ 50%(社科常用 60%)EFA 解读
效度(CFA)拟合指标 χ²/df、RMSEA、CFI、TLI、SRMR见对照表CFA 与 SEM
收敛效度 AVE≥ 0.50CFA 与 SEM
组合信度 CR≥ 0.70CFA 与 SEM
判别效度AVE 平方根 > 该维度与其他维度的相关系数CFA 与 SEM
处理顺序原则:先修信度,再修效度;先删题(局部问题),再考虑补样本或改模型(全局问题)。因为信度是效度的前提,题目本身内部都不一致,谈结构效度没有意义。

二、信度不达标(α 偏低)的排查顺序

  1. 查反向题有没有反向计分。 这是占比最高的原因。5 点量表反向题要转成「6 − 原始分」,漏做会让 α 断崖式下跌。先查这个,往往一改就达标。
  2. 查维度划分是否正确。 α 衡量的是"同一个构念内部的一致性"。把两个不同构念的题算在一起,α 一定低。
  3. 按 CITC 与「删除项后的 α」删题。 标准:CITC < 0.30 且 删除该题后 α 上升。每次只删一题,删完重算,再看下一题。一次删多题很可能把 α 越删越低。
  4. 检查数据质量。 大量规律性作答(全选 3 分、连续同一选项)、答题时间过短的样本,会系统性压低 α。先做直线作答与作答时长清洗。
  5. 考虑补样本。 每个维度建议至少有题项数 5–10 倍的有效样本;样本太小 α 本身就不稳定。
注意:不要靠堆题把 α 凑上去。 α 随题项数单调上升,把语义重复的题塞进同一维度确实能提高 α,但会牺牲内容效度,且 α 过高(> 0.95)在审稿人眼中反而可疑。

三、EFA 效度不达标怎么处理

情形 A:KMO < 0.60

情形 B:载荷低(< 0.50)或存在交叉载荷

情形 C:累计方差解释率 < 50%

四、CFA 效度不达标怎么处理

指标标准不达标时的优先动作
χ²/df< 3(宽松 < 5)检查样本量(< 200 时 χ² 不稳)、检查是否有跨载荷题项
RMSEA< 0.08(优良 < 0.05)看修正指数(MI),允许同维度内残差相关(需理论依据)
CFI / TLI> 0.90(优良 > 0.95)同上;TLI 对模型简洁度敏感,因子过多会压低 TLI
SRMR< 0.08检查是否有题项载荷过低
AVE(收敛效度)≥ 0.50删除该维度中载荷最低的题(每次一题),再重跑 CFA
CR(组合信度)≥ 0.70同 AVE;CR 通常比 AVE 先达标
修正指数(MI)怎么用: AMOS 或 lavaan 输出的 MI 表示"如果允许这两个参数自由估计,χ² 会下降多少"。可以用它定位问题,但添加残差相关必须能在理论上讲清楚(例如两道题措辞高度相似、同属反向量表),纯粹为了降低 χ² 而加残差相关是典型的过拟合,审稿人会追问。

判别效度不达标(AVE 平方根 < 相关系数)

五、一条底线:哪些做法不能做

不能做的四件事:
  1. 为了达标而反复试错删题。 删题必须有理论依据,且要报告删了几题、为什么删。删完才达标的模型,必须在论文里如实说明。
  2. 修改或编造原始数据。 这是学术不端,任何情况下都不成立。
  3. 只报告达标的指标、隐去不达标的。 选择性报告同样属于不端行为。
  4. 换一版模型跑到达标就当作最终结果。 模型必须由理论驱动,不能由数字驱动。

六、论文/答辩里怎么说明

如果经过合理处理后仍有指标处于"宽松标准"区间,正确做法是如实报告 + 给出依据。示例表述:「本研究中信息分享维度的 α 系数为 0.68,略低于 0.70 的常用标准。考虑到该维度题项数较少(4 题)且属于探索性研究,参照 Nunnally(1978)对探索性研究可放宽至 0.60 的建议,该维度信度处于可接受范围。同时该维度的组合信度 CR 为 0.78,AVE 为 0.52,收敛效度良好,可作为信度达标的补充证据。」

这种写法比"我的 α 是 0.85"但实际做过大量删题调整要可信得多——审稿人看的是逻辑是否自洽,而不是数字是否漂亮。

七、常见问题

α 和 CR 都达标了,还需要做 CFA 吗?

看研究层次。仅做描述、相关、回归的研究,α + EFA 通常够用;若涉及潜变量建模(SEM)、要报告 AVE/CR、或期刊要求结构效度,则必须做 CFA。

样本量不够是硬伤吗?

是。KMO、CFA 拟合、AVE 都对样本量敏感。若只有 100 出头,建议不要做 CFA 与 SEM,改用 EFA,并在局限部分说明。

删题后需要重新收集数据吗?

同一批数据的删题属于量表修订,报告时需说明。若删题幅度很大(如某维度 6 题删掉 3 题),应讨论题目本身的表述问题,并建议后续研究重新验证量表。

先给数据做一次体检

把数据上传到艾吖法,一次性拿到:信度(α / CITC / 删除项后的 α)、KMO 与 Bartlett、EFA 载荷与方差解释率、CFA 拟合与 AVE / CR / 判别效度。哪些指标不达标、差多少,一屏看清,再决定从哪一步动手。

上传数据做体检