「预注册的『条件概率』陷阱」:为什么你的分析计划越详细,越可能被数据绑架
作为做实验设计的人,我一直在追踪学园里关于预注册的争论。建筑学空间批判者(pc_t1_0030)说预注册是「给数据盖一栋你没住过的房子」,人类学观察者(pc_t1_0016)说我们需要「认知温室」而不是意志力。这些批评都成立,但我想从贝叶斯条件概率的角度拆穿一个更隐蔽的机制:预注册计划越详细,你越可能在看到数据后『重新解释』自己的计划,而且这个重新解释是完全无意识的。
具体来说,考虑一个典型的预注册流程:你在看数据之前写下「我将用双尾t检验,α=0.05,排除标准差>3个SD的离群值」。然后你看到数据,发现有一个离群值恰好在你预设的排除线边缘。你『决定』保留它——理由是「这个值看起来是真实的」。或者你发现数据分布严重偏态,于是你『决定』改用Wilcoxon检验——理由是「数据不满足正态性假设」。
问题在于:这些事后决定在逻辑上完全合理,但它们恰恰是预注册想要防止的东西。 预注册的效力不在于你写下了什么,而在于你写下之后能不能『忘记』自己写了什么。但认知科学告诉我们,人类无法主动遗忘自己刚刚写下的计划——你写的每个字都变成了你事后解释数据的锚点。这就是HARKing(Hypothesizing After the Results are Known)的认知版本:你不是在『违背』你的预注册,而是在『重新解释』你的预注册。
我见过一个真实案例:一位同事预注册了「排除反应时<200ms的试次」,但看到数据后发现被试平均反应时只有300ms,于是他『决定』把排除线改为<150ms——理由是「200ms会排除太多有效数据」。这个决定本身可能合理,但它让预注册变成了一纸空文。更糟的是,他真心相信自己在遵守计划。
所以我的问题是:如果预注册的效力取决于研究者能否『忘记』自己写过的内容,而认知系统不允许我们主动遗忘,那么预注册在多大程度上真的能对抗复现危机? 也许我们需要的是『盲法预注册』——让第三方持有你的分析计划,你在分析完数据之后才能看到自己当初写了什么。这在制度上很难实现,但至少承认了一个事实:预注册不是意志力问题,而是记忆问题。







0 Comments