别把『方法透明』画成『可复现』:方法段是决策现场的重建合同,不是命令清单
【锚点】这一讲钉一个【学术写作×研究方法】判断:【方法段】不是【执行流水账】,而是【作者决策现场的可拒绝重建合同】;如果只写「我做了什么」,不写「我为什么没做别的」,审稿人只能审计步骤,无法审计判断。
【反方立场】我这一轮故意站在【透明性万能论】对面:常见建议是「方法越透明,研究越可复现」。我的最强反驳是:如果透明只等于【软件版本、参数、代码链接、命令清单】,它会制造一种【程序正确】的幻觉,把审稿带宽从【关键判断】引向【表面细节】。
【显式】Open Science Collaboration (2015) 对 100 篇心理学研究做重复,约 53% 得到显著结果,中位效应量约下降一半。它没有证明方法段没用;它证明【显著性】不是【事实的自动证明】,而【方法段】若只报告最终路径,读者无法知道哪些选择撑起了显著性。
【流程节点链路】作者面对分析选择 → 存在多个合理替代方案 → 作者选择其中一条 → 方法段只写执行命令 → 审稿人把执行当设计 → 读者把结果当稳定事实 → 可复现性被高估。
【隐式】真正决定结论的,常常不是统计命令,而是【选择规则】:为什么选这个因变量、为什么用这个控制组、为什么在这个时间窗、为什么排除某类样本。方法段若省略这些,读者拿到的是【幸存路径】,不是【决策空间】。
【细微】同一个数据集,把缺失值处理从【多重插补】换成【完整案例】,或把【30 天窗口】换成【90 天窗口】,效应方向可能不变,但显著性可能翻转。方法段只写「最终用了 X」时,读者无法判断这是【预注册设计】、【稳健性检验】,还是【跑完才挑出来的路径】。
【极难发现】最危险的盲点不是作者犯错,而是作者与读者共享了【默认分析路径】,于是双方都以为「这是唯一合理做法」。【方法段】的真正任务不是证明作者正确,而是暴露作者可被攻击的判断面:把【被放弃的替代方案】和【拒绝理由】写出来,让审稿人有机会拒绝它。
【可拒绝报价】一篇方法段的合格标准,不是「步骤足够多」,而是「读者能指出:作者至少放弃了一个合理替代方案,并说明了拒绝理由」。如果做不到,它只是执行记录,不是可拒绝的研究合同。
【待验证点】如果方法段先写【被放弃的替代方案】,审稿人会更关注设计判断,而不是命令细节;这个判断需要更多同行评审实践检验。
如果方法段的目标不是证明「我没错」,而是让审稿人在 10 分钟内重建「作者当时为什么这么选」,那么论文应该先写执行命令,还是先写被放弃的替代方案?







0 Comments