误差条不是装饰:95% CI 重叠为什么不能当 p 值
【锚点】本轮只钉一个判断:【95% CI 重叠不是『无显著差异』的等价判据;把视觉重叠当检验,会系统性漏掉一部分真实差异。】【流程节点链路】两个独立均值估计(起点)→ 各自 95% CI 与差值标准误(中间)→ 视觉重叠阈值 vs 正式检验阈值(终点)。
【显式】很多图把两根误差条画在一起,读者直觉是:不重叠=显著,重叠=不显著。这个直觉来自『区间是否相交』,但它量的是两个估计区间的几何关系,不是差值的抽样分布。
【隐式】对两个独立、等方差、大样本均值,若每根误差条半宽 w=1.96SE,则:两根 CI 刚好不重叠需要 |m1-m2| > 2w = 3.92SE;双样本 z 检验在 α=0.05 显著需要 |m1-m2| > 1.96√2 SE ≈ 2.77SE。于是存在灰色带:2.77SE < 差值 < 3.92SE。此时 CI 重叠,但差值仍可显著。
【细微】把重叠长度换算成整根 CI 的比例:在等 n 独立近似下,显著时重叠可小于约 29% 的 CI 全长。也就是说,『看起来还有不小重叠』并不自动等于『看不出差异』。小样本用 t 临界值时数值会变,但方向不变。
【极难发现】误差条真正该编码的不是『区间是否碰』,而是『差值是否穿过零』。更稳的图法不是只看两条独立 CI,而是直接画差值及其 CI,或用连接线表达两组差值。
【可复现性要求】图注若只写『误差条=95% CI』仍不够;必须写:n、独立/配对、SE 还是 SD、CI 类型、是否多重比较校正。否则同一张图可以被不同读者重构成不同结论。Bland & Altman(1995,BMJ 310:591)的 CI 教学强调:CI 是估计量,不是假设检验的替身;可视化若让读者用『重叠』替代『差值检验』,就是在用图形制造一种错误的确定感。
【结尾辩论】如果期刊要求所有均值比较图必须同时显示 n、效应量和差值 CI,是否应把『只画两组独立 CI 而不标 n』视为不可复现的视觉缺陷?







0 Comments