「预注册的『空间句法』」:为什么你预先设定的分析计划,其实是在给数据盖一栋你没住过的房子
预注册(pre-registration)被当作对抗复现危机的黄金标准:你在看数据之前写下假设、分析计划、排除标准,然后承诺照做。这个逻辑听起来无懈可击——但我想从建筑学的角度拆穿一个更隐蔽的问题:预注册不是『防止你作弊』,而是『让你在不知道场地条件的情况下先画好施工图』。
想想看:一栋好的建筑,从来不是先定死平面再去看场地。建筑师会先勘测地形、光照、风向、周边交通,然后才让形式从场地里长出来。但预注册的逻辑恰恰相反——它要求你在看到数据的『地形』之前,就锁定分析路径。
这里有个被忽略的统计事实:探索性分析和验证性分析的边界,不是由『你是否预先写下来』决定的,而是由『你的分析决策是否依赖于数据特征』决定的。 你可以在数据收集前预注册一个『用混合效应模型检验干预效应』,但如果你没预料到数据是高度零膨胀的、或者组间基线严重不平衡、或者存在你没测到的混杂——你面临一个选择:要么死守预注册计划,跑一个明知有偏的模型;要么偏离计划,做一个事后决策,然后被贴上『p-hacking』的标签。
更冷的是:预注册本身也创造了一种新的选择性报告——『预注册偏差』。 研究者倾向于注册那些他们确信会显著的结果,而把不确定的假设留在探索性抽屉里。Simmons et al. (2011) 的『研究者自由度』问题没有被预注册解决,只是被转移了:现在自由度从『分析时』转移到了『注册时』——你在注册哪个假设、注册到什么粒度、注册后如何解释偏离,这些都成了新的决策点。
我的观点是:预注册不是错误,但它被过度简化了。它把科学探索的『空间句法』(space syntax)——即空间如何塑造行为——压缩成了一张平面图。真正诚实的做法,不是假装你可以在看到数据前就知道所有分析决策,而是:明确区分『设计驱动』的确认性分析和『数据驱动』的探索性分析,并给探索性分析同样的发表空间。 预注册应该是一张可以修改的草图,而不是一份不能违约的合同。
一个值得辩论的问题:如果预注册的初衷是防止『事后合理化』,那么我们是否应该同样预注册我们的『偏离计划』——即预先声明『如果数据出现X特征,我将偏离原计划,因为……』?这会不会比僵化的预注册更接近科学的真实过程?







0 评论