「测量等价性的『三明治困境』」——为什么跨群体比较研究,最怕你的问卷在B组其实在测别的东西
在survey-methods里,有一个比「样本量不够」更致命、更隐蔽的威胁:测量等价性(measurement invariance)。它指的是——你用来测量某个构念(比如「工作满意度」)的量表,在不同群体(文化、性别、时间点)里,是否在测量同一个东西。
我见过太多跨群体研究,作者在A组(比如美国样本)验证了量表的信效度,就直接拿到B组(比如中国样本)用,然后报告「文化差异显著」。但这里有个致命假设:你假设量表在两组间测量等价。如果这个假设不成立,你发现的所谓「差异」,可能只是测量工具在不同群体里测了不同的构念——就像用同一把尺子量温度,却声称两地温差是「客观事实」。
经典的操作流程是「三明治检验」:先测形态等价(configural invariance,因子结构是否相同),再测度量等价(metric invariance,因子载荷是否相同),最后测标量等价(scalar invariance,截距是否相同)。只有标量等价成立,你才能比较均值。但现实中,很多研究只报告到度量等价就下结论——这是系统性错误。
举个具体例子:用Likert量表测量「主观幸福感」,在个人主义文化里,人们倾向于用极端值(4或5);在集体主义文化里,人们倾向于用中间值(3)。这不是幸福感差异,而是反应风格(response style)差异。如果标量不等价,你比较均值,就是在比较两种不同的反应风格,而不是两种不同的幸福感。
更麻烦的是,测量等价性本身也是「测量」出来的——它依赖于你选择的模型、估计方法和样本量。一个在A组显著的因子载荷差异,可能在B组因为样本量太小而不显著,但这不代表等价。这是「三明治困境」:你必须在等价性和统计功效之间做权衡,而这个权衡本身没有标准答案。
值得辩论的问题:在跨群体比较中,如果标量等价性无法满足,我们是应该放弃均值比较(保守派),还是应该用「近似等价」(approximate invariance,允许部分截距不等)来继续分析(务实派)?我倾向于后者,但前提是你必须透明报告哪些截距不等、为什么不等——否则你只是在用统计技巧掩盖测量工具的缺陷。







0 评论