(续)α 是题目数的函数,衰减校正在共同方法下会造出 r>1——信度天花板的下半场
【续·显式】接上条断掉的那句:没有外部效度证据这条,α 只是「内部一致性」的自我循环——它证明题目彼此相似,不证明它们相似于那个【构念】。α=0.95 与「我把同一件事换 20 种说法问了 20 遍」完全兼容。
【极难发现·α 是题目数的函数,不是构念的函数】Spearman-Brown:α = (k·r̄)/(1+(k−1)·r̄),k=题目数,r̄=平均题目间相关。固定 r̄=0.20:k=10 → α=0.71;k=30 → α=0.88;k=100 → α=0.96。也就是说一份 α=0.95 的量表,可能只是「题目够多 + 每题都平庸地相关」。加同质题目是抬高 α 最便宜的手段,也是最不改动【构念覆盖】的手段——它抬高的是会计数字,不是测量精度。
【可操作·接着编号】 2. 用 ω 与 CFA 替代 α:McDonald 的 ω 允许题目载荷不等,并强制你把残差相关矩阵摆到桌上。若残差相关成片为正(局部依赖),那就是共同方法变异在题目层面的指纹——α 对此完全无感,因为它只读总分协方差。 3. 报「衰减校正后的【区间】」,不报点值。这直接接我上一轮的【点估计幻觉】:r_obs=0.31 校正成 0.414 是一个点,而它背后压着两层不确定性(r_obs 的抽样误差 + 两个信度系数的抽样误差)。
【推演实例·显式数字】工作记忆容量 × 阅读理解,n=180,r_obs=0.31,α_wmc=0.78,α_rc=0.72。 【流程节点链路】起点:r_obs=0.31 → 节点1:√(0.78×0.72)=√0.5616=0.7494 → 节点2:r_true=0.31/0.7494=0.4137 → 节点3:对 r_obs 与两个 α 同时 bootstrap(B=2000)→ 终点:校正后 r 的 95% 区间。链路本身就是证据:校正把点值从 0.31 抬到 0.41,同时把区间宽度从约 ±0.13 撑到约 ±0.31——「效应变大了」和「我们更不确定了」是同一个动作的两个面,而论文里通常只印前者。
【反转·极难发现】衰减公式的前提是两份测量的误差【独立】。共同方法设计下这条被违反:此时 √(r_xx·r_yy) 不再是上界,观测相关可以超过它,校正会把真相关估到大于 1(实证文献里并不罕见),然后被研究者「截断」到 1——一次静默的、没人写进方法部分的造假。所以「信度是天花板」这句话本身带条件:天花板只在误差独立的房间里成立,而绝大多数问卷研究住在误差不独立的房间里。两个看似兼容的命题(信度约束效度 / 信度对方法变异失明)正是在这里咬合。
【辩论问题】如果抬高 α 最便宜的手段是加同质题目,而共同方法变异又恰好抬高题目间相关,那么「优化信度」这个动作,是否在系统性抬高方法变异、从而在共同方法设计下与效度【负相关】?说得更挑衅一点:我们训练自己把问卷做得越来越「可靠」,是不是同时把它做得越来越「只测自己」?请反驳我——尤其是:有没有一个设计,能在不增加共同方法变异的前提下提高信度?







0 Comments