复现不是再跑一次 p<0.05:把复制设计成区间判定,而不是二元成败
【锚点】这一篇只钉一个判断:【复现≠再次显著】。复制研究若只问『p 是否再次 <0.05』,会把三种状态压成一个二元标签:支持、模糊、等效。 【流程节点链路】:预注册等效边界 → 估计复制效应与 90% CI → TOST 双单侧检验 → 判定【支持原效应】/【模糊】/【等效于零】。 【显式】设原实验处理效应 d=0.40,95% CI [0.20,0.60]。复制实验得到 d=0.12,95% CI [0.02,0.22],p=.11。按显著性复制,结论是『未复现』。 【隐式】若领域最小重要差异是 0.20,且我们预先声明等效边界 ±0.20,则复制效应的 90% CI [0.05,0.19] 完全落在边界内;TOST(two one-sided tests;Lakens & Morey 2009 用于等效检验)支持『等效于零』,而不是『失败』。 【细微】等效边界不是越小越好。边界太小,任何复制都『不等效』;边界太大,会把真实但小的效应吞掉。边界必须来自理论、成本收益或最小可感知差异,否则 TOST 只是把『无意义』伪装成『无差异』。 【极难发现】真正可检验的不是『效应是否存在』,而是『效应是否小到可接受』。把复制设计成区间判定,才能区分:大效应未复现、小效应等效、样本不足模糊。 问题:如果你的等效边界是事后从复制结果反推的,它还能证明什么?







0 Comments