「预注册几乎什么都没改变」:96% 与 44% 之间隔着的不是仪式,是审稿的时点
【锚点】这一篇只钉一个判断:把预注册当成学术诚信的「洗手仪式」,是把因果搞反了。真正压低阳性率的不是「提前写下来」,而是【决策权在数据之前转移】——而这件事,只在注册报告(Registered Report)里真正发生。
一、【显式】先把数字摆出来 Scheel、Schijen 与 Lakens(2021, AMPPS)比对了三类稿件:71 篇注册报告、152 篇「在传统期刊里预注册过」的文章,以及常规心理学文献。阳性结果比例:【注册报告 44%】、【传统期刊里的预注册文章 96%】、【常规文献 96%】。 注意后两个数字是同一个数字。预注册这个动作,在它最常见的落地上,没有移动那根指针。
二、【隐式】为什么没动 预注册约束的是【声明】,不是【决策权】。它把「我打算做什么」提前写下来;但写下之后,谁来决定「实际做了什么算不算数」?还是作者自己,还是在数据之后的那次投稿。 【流程节点链路】传统期刊预注册:提出假设 → 写预注册文档并上传 → 收集数据 → 分析(可能偏离)→ 写稿(偏离可披露可不披露)→ 投稿 → 审稿人只能看到稿件+预注册文档 → 发表。 这条链上没有任何一个节点握有【否决权】:审稿发生在数据之后,偏离已经被数据「追认」为结果,而撤稿成本远高于接受成本。所以预注册文档在链上的功能是【存档】,不是【闸门】。
三、【细微】偏离到底有多少,取决于计划写得多细 Claesen 等(2020, Royal Society Open Science)评估第一代预注册:大量文档没有把分析计划写到可执行的程度——没写模型、没写排除规则、没写「如果主分析不显著怎么办」的分支。于是「偏离」根本无从判定:你无法违反一个你没写下的计划。 【可操作标准】一份预注册要「可执行」,锁死的是【决策规则】而不是【主题】:因变量与编码、排除与缺失处理、模型与协变量集合、以及分支树(若 X 不显著则做 Y,Y 是否进入正文)。 【流程节点链路】注册报告:提出假设 → 写预注册文档 → 投稿 → 第一阶段审稿(只审方法与推理)→ 原则上接收 → 收集数据 → 分析 → 第二阶段核对偏离 → 发表。 同一个动作,闸门位置不同:这里审稿在数据之前,作者拿到「原则上接收」时就已经知道——不管结果是什么,它都会发表。44% 是从这个结构里长出来的,不是从「更诚实」里长出来的。
四、【极难发现】合规剧场的真正盲点 预注册没有消灭信息不对称,它只是把不对称从「你有没有计划」搬到了「你的计划有没有被遵守」。而后者对读者是不可验证的:读者看到的是稿件+一份可能含糊的预注册文档,无法区分【没偏离】与【偏离了但没写】。 所以「要求所有论文预注册」这条政策,最可能的净效应是抬高【可审计性的期望值】,而不是降低【选择性报告的期望值】——除非配套两件事:偏离声明成为稿件的结构部分(不是致谢里的脚注),以及预注册文档写到分支树级别。
【待验证点】我没有找到把「预注册质量」与「阳性率」直接联立的实证研究;如果谁有,这是这条论证最该被攻击的接缝。
结尾问题:如果预注册的主要价值是「让偏离可见」而不是「让偏离消失」,期刊该不该只收注册报告?还是说,把全行业推到注册报告,会让「第一阶段接收」变成新的稀缺资源,从而把选择性压力从结果端搬到【选题端】——那只是换了个地方做 p-hacking?







0 Comments