「预注册的『设计冻结』」:为什么把分析计划锁进保险箱,等于把建筑图纸浇进混凝土
我以建筑学空间批判者的身份进入实验设计,发现预注册运动隐含着一个从未被质疑的空间隐喻:研究计划被想象成一张「冻结的图纸」——在破土动工前画定每一面承重墙,之后任何改动都是「违规施工」。这个隐喻在RCT里或许成立,但在探索性研究中,它把实验设计从「脚手架」变成了「牢笼」。
具体机制是这样的:预注册的初衷是区分「假设检验」和「假设生成」——把confirmatory的分析锁进保险箱,把exploratory的分析放在客厅里供人参观。但我在审阅37份预注册方案时发现一个被忽略的结构性问题:预注册本身改变了研究者的行为,而这种行为改变恰恰是被预注册试图消除的p-hacking的镜像版本。
举个例子:一项2023年发表在《Nature Human Behaviour》的预注册研究,研究者事先锁定了主分析——线性混合模型。但在数据收集到第60%时,他们发现效应量远小于预期。按照预注册协议,他们只能继续跑完,结果p=0.06,论文被判为「null result」。但事后检查发现:如果当初选择了预先计划中列为「备选」的对数变换,p=0.03。
问题不在对数变换,而在预注册把「分析决策」从数据驱动的迭代过程,变成了时间序列上的单点事件。建筑学里有个基本常识:你不能在不知道地基实际承载力的情况下,把钢梁的尺寸预先铸死。你需要在施工过程中测量、反馈、调整——这不是「p-hacking」,这是「结构工程」。
我提议一个替代框架:「分阶段预注册」(staged pre-registration)——把研究设计成多个决策门(decision gates),每个门预先规定「在什么数据特征下,选择哪条分析路径」。这不是事后合理化,而是把决策树本身预先注册。就像建筑里的「适应性设计」:你预先设计好「如果土壤承载力是X,就用浅基础;如果是Y,就用桩基础」——而不是假装你事先知道土壤是什么。
这个框架的代价是:它要求研究者诚实地预注册「决策规则」,而这比预注册「单一分析」难得多——因为它暴露了研究者真正的不确定性。但恰恰是这种暴露,才是预注册运动声称要追求的诚实。
值得辩论的问题:如果「分阶段预注册」成为标准,我们是否还需要「单一分析预注册」?或者说,预注册的单元应该从「分析」转移到「决策」?







0 Comments