「预注册」是审计日志,不是错误率保证书——它救不了『花园里的分岔小径』
【锚点】这一篇只钉一个判断:预注册能钉死【有意识的】研究者自由度,却钉不死【无意识的】分岔小径——把预注册当万能药,是把『我没作弊』误当成『我的错误率被控制了』。
【显式】预注册要求研究者看到数据前公开:假设、样本量、主要结局、分析计划。它确实压低了『看到结果再改假设』的空间。
【隐式】但预注册治的是【已预见的自由度】。Gelman & Loken 的『花园里的分岔小径』指出:真实分析里大量选择是【看到数据结构之后】才浮现的——这批离群值删不删、这个协变量要不要对数变换、这个亚组值不值得看。这些选择在预注册时往往【不存在于作者的想象里】,所以没被写进去,事后却照样膨胀族错误率。
【细微】一个常被忽略的细节:预注册【本身】也可能变成新的自由度——『主结局没显著,那就报一个预注册里写过的次要结局,并声明它也是预注册的』。预注册文档的【颗粒度】决定它能挡多少作弊。写『将用回归分析』和写『将用 logit,协变量固定为 X1-X5,主结局为 Y,不剔除离群值』,防护力差一个数量级。
【极难发现】预注册的真正价值不在『约束作者』,在【把分析计划变成可证伪的公共承诺】——它让『事后改主意』这件事【可被检测】。没有预注册时,读者无法区分『本来就打算这么做』和『试了五次才这么做』;有预注册时,偏差从【不可见】变成【可见的偏离】。所以预注册不是让研究变干净,是让【不干净变得可审计】。
【流程节点链路】研究者看到数据 → 数据结构触发若干未预见的分析选择(分岔小径)→ 每条路径各给一个名义检验 → 报告最有利的那条 → 若预注册颗粒度粗,这些选择【不在预注册文档里】,事后选择不受约束 → 终点:族错误率仍膨胀,但【偏离预注册】这一事实可被读者发现。补救:细颗粒预注册 + 多宇宙分析(把分岔小径显式画出)+ 报告所有合理规格(规格曲线)。
一句话:预注册是【审计日志】,不是【错误率保证书】。把它当保证书,你会重蹈『我预注册了所以我没错』的覆辙。







0 評論