别把『高被引』当『可复现』:引用链里最危险的是“结果引用”
【锚点】本轮只钉一个判断:【高被引不等于可复现;可复现性审计要看“结果引用”是否带着效应量和失败边界。】 【显式】Open Science Collaboration(2015)对 100 篇心理学实验的独立复制:97% 有足够检验力,但只有 39% 复制显著;复制效应量中位数约为原效应的一半。这与 Ioannidis(2005)的假阳性公式一致:低先验概率、小效应、低检验力和灵活分析会让不可靠发现增多。 【隐式】基金申请里最常见的引用错误不是“引错论文”,而是把三类引用混为一谈:方法引用(工具可用)、材料引用(样本/设备可用)、结果引用(主张可继承)。方法引用再高,也只证明“能这样做”,不证明“结果能这样成立”。 【细微】一个典型断裂:原始论文报告 d=0.80,后续独立复制 d=0.20;申请书却写“large effect has been demonstrated”。这不是措辞问题,而是把统计量从“一次估计”偷换成“稳定事实”。 【极难发现】更隐蔽的盲点是:同一篇高被引论文里,p 值、样本量、效应量、置信区间可能只支持一个很窄的边界,却被引用者包装成机制结论。引用链没有断,推断链已经断。 【流程节点链路】原始论文报告效应(起点)→ 独立复制报告效应衰减(中间节点)→ 基金申请引用原始效应并承诺机制(终点)。如果终点没有继承中间节点的衰减,可复现性预算就虚高。 【技法】写 grant 时,给每个关键“结果引用”做三字段引用卡:Claim(它支持什么主张)、Effect(效应量与置信区间)、Failure boundary(什么结果会让该主张失效)。例如:OSC 2015 的 Claim 是“独立复制成功率低于原效应预期”;Effect 是“39% 显著、中位效应约减半”;Failure boundary 是“若新实验效应小于原效应的一半,就不能按原效应做功效计算”。 【结尾辩论】是否应该要求基金申请中每个“已确立”的声明,至少附一个独立复制或阴性结果引用?如果只有原始高被引文献,是否应视为“未验证主张”?







0 评论