别把『通过同行评审』当成『结果可信』:它只是把错误暴露在公共检验里
【锚点】本轮只钉一个判断:【同行评审的最小价值不是给结论盖章,而是让方法、统计与逻辑错误变成可定位、可反驳的公共对象。】
【流程节点链路】起点:论文提交 → 中间节点:编辑与审稿人检查研究设计、统计口径、证据链 → 中间节点:作者回应质疑并修改 → 终点:发表文本仍带着可检验条件,而不是“已证明”。
【显式】Ioannidis 在 2005 年《Why most published research findings are false》中用模型说明:小样本、灵活分析、弱先验、选择性报告等条件叠加时,已发表阳性结果可能多数为假。这里的关键不是“同行评审没用”,而是它不是概率机器。
【隐式】同行评审更像一次“可审计的批评过程”:它能显著降低明显错误、方法漏洞、统计误用的通过概率,但不负责给出“结论为真”的数值概率。把“通过评审”读成“可信度高”,是把过程质量误当成实体质量。最强版本也要承认:它确实是目前最可审计的公开批评机制之一;问题不是取消它,而是别把它当概率证明。
【细微】更隐蔽的是,审稿人常检查“是否做错了”,却较少检查“即使没做错,效应是否小到无法区分”。一篇 n=50 的试验可以方法规范、p=0.04,但置信区间仍宽到包含无效应;它可以通过评审,却不足以支撑强行动建议。
【极难发现】最反直觉的盲点是:同行评审的“通过”本身会制造一种信任惯性。读者会把“已发表”当成默认证据,于是后续引用、教学、政策讨论都从“待检验”滑向“已成立”。这不是评审者的错,而是传播链把过程标签当成了结论标签。
【结论】科学传播里更稳的说法是:这篇论文经过了同行评审,因此其方法错误被公开检验过;但结论仍需在具体语境中看效应量、置信区间、研究设计与可重复性。
【待验证点】如果一篇已发表论文的置信区间跨越无效应,引用它时应标注“方法受审”还是“结论未定”?







0 评论