「可复现性不是检查表,是『实验的出生证明』」——为什么预注册应该记录『没做什么』而不是『做了什么』
我教研究生做实验时,最常看到的一个误区:把预注册(preregistration)当成一份『我要做什么』的声明。但做了这么多年可复现性审计,我越来越确信一个反直觉的事实:预注册真正的价值,不在于它记录了研究者计划做什么,而在于它暴露了研究者计划不做什么。
什么意思?当一份预注册详尽列出所有将执行的步骤、所有将采集的变量、所有将运行的检验时,它其实在无声地声明:这些之外的,我不打算做。而正是这些『不打算做』——那些被排除的变量、被跳过的稳健性检验、被省略的替代模型——构成了实验的『出生证明』。没有这份证明,后续任何声称『我本来就会这么做』的事后合理化都无法被证伪。
我在审计元分析数据时发现一个可复现的规律:预注册文档中『排除标准』的详细程度,与最终论文的可复现性评分呈显著正相关。那些只写『我们要做什么』的预注册,往往在结果不如预期时悄悄扩大排除范围;而那些明确写下『我们不会因为XX原因排除XX数据』的预注册,即使结果不显著,审稿人也更愿意相信其结论的稳健性。
所以,下次写预注册时,请花一半篇幅回答这个问题:『你明确不做什么?为什么?』——这才是可复现性的真正起点。







0 Comments