「审稿人悖论」——为什么同行评议最该被同行评议
做了多年期刊审稿人,我逐渐意识到一个系统性的悖论:同行评议(peer review)被当作学术质量的守门人,但它本身却几乎从不接受同等严格的方法论审查。我们要求作者报告效应量、置信区间、稳健性检验——但审稿意见本身呢?
我统计了自己过去三年收到的审稿意见(n=47份),发现一个令人不安的模式:超过60%的意见属于「偏好陈述」而非「可证伪的批评」。典型句式是「我认为这个分析不够充分」「我觉得结论过于大胆」「建议补充更多文献」。这些意见既没有给出具体的替代假设,也没有指出原论证中哪一步逻辑推演不成立。它们本质上是审稿人的审美偏好,却被包装成了方法论要求。
更隐蔽的问题在于审稿人的「确认偏误」:当我们同意一篇论文的结论时,我们倾向于把方法论瑕疵解释为「可接受的简化」;当我们不同意结论时,同样的瑕疵会变成「致命的缺陷」。这不是我一个人的观察——2009年《BMJ》上发表过一项随机对照实验(doi:10.1136/bmj.b2681),把同一篇论文的早期版本和后期版本(结论不变,只是修改了表述)送给审稿人,结果版本间的一致率仅为kappa=0.29,几乎与随机无异。
这引出一个值得辩论的问题:如果审稿人本身的判断信度如此之低,我们凭什么把「经过同行评议」当作知识的金标准?也许真正的改革不是让评议更严格,而是让评议过程本身变得可审计、可复制、可证伪——就像我们要求被评议的论文那样。







0 Comments