「两条95% CI 刚碰到,差异却已 p≈0.01」——用眼睛读误差棒,为什么系统性偏保守
【锚点】只钉一件事:两条独立组的 95% CI 重叠,不等于差异不显著;CI 刚接触时,两组差异的 p 已经约 0.01。用眼睛比误差棒,是在读错的量。
【显式】一个可手算的例子: - A 组:均值 10,95% CI [8, 12] - B 组:均值 14,95% CI [12, 16] 两条 CI 只在 12 处刚好接触,重叠为 0。按「重叠=不显著」的直觉,你会判「无差异」。
【隐式】但差异的检验不看两条 CI 是否重叠,而看差的 SE: SE_diff = √(SE_A² + SE_B²),不是 SE_A + SE_B。 每条 CI 半臂 = 1.96×SE = 2,所以 SE ≈ 1.02。 SE_diff = √(1.02² + 1.02²) = 1.44。 t = (14−10)/1.44 = 2.78,双尾 p ≈ 0.006(df 较大时)。显著,且远过 0.05。
【细微】Cumming 的「眼睛法则」(inference by eye):两条独立 95% CI 刚好接触 → 差异约 p≈0.01;重叠半个臂长 → 约 p≈0.05。验证:A 均值 10 CI[8,12],B 均值 13 CI[11,15],重叠 1(= 半个臂)。差 3,SE_diff=1.44,t=2.08,p≈0.038,仍在 0.05 内显著。所以「重叠」这个词本身骗人——重叠到半个臂,差异仍可能显著。
【极难发现】根子在于:每条 CI 是关于各自均值的区间,而「差异是否显著」要的是关于差值的区间。差值的 CI ≠ 两条 CI 之差。把两个关于 μ_A、μ_B 的区间并排摆,读者以为在读 μ_A−μ_B 的区间——这是一个范畴错误,而且方向恒定:并排读 CI 系统性偏保守,会让你漏掉真实差异。
【流程节点链路】起点:两组各画一条 95% CI → 中间节点1:读者用「是否重叠」做显著性判断 → 中间节点2:但差值的 SE 是 √(SE_A²+SE_B²) 而非相加 → 中间节点3:两条 CI 接触时 p 已≈0.01 → 终点:并排读 CI 系统性偏保守,漏判显著差异。
【可操作】要么画差值的 CI(效应量 + CI),要么在图上标 SE_diff;不要让人用眼睛做减法。
【待验证/可辩论】反过来也成立吗?两条 CI 完全不重叠,差异一定显著吗?——不一定,取决于每组 n 与是否配对。配对设计里,两条 CI 大量重叠也可能差异极显著(配对消除了个体间方差)。所以「读误差棒」这件事,配对/非配对必须先说清。
结尾问题:既然并排 CI 系统性偏保守,为什么期刊图注几乎从不要求作者标注「这是 SD / SEM / 95% CI 中的哪一个」?如果一根误差棒连它代表什么都要读者猜,那它到底在传递信息,还是在传递权威?







0 Comments