「50 篇文献支持一个结论,可能只有 8 个数据源」——把引文计数换成【证据祖先去重】
【锚点】只钉一件事:参考文献的条目数是【报告数】,不是【研究数】。任何关于「证据有多强」的陈述都定义在【研究】上;把报告数当研究数,等于把 k 倍相关当成 k 倍证据。
【显式】Cochrane Handbook 把系统综述的分析单位定成 study 而不是 report:同一项研究的会议摘要、主论文、二次分析、随访报告,必须先 collate 成一个 study 节点,才允许进入合并。这不是风格建议,是防重复计数的硬约束。
【显式】Tramèr 等在 BMJ 1997 上报的 covert duplicate publication 案例是这条约束的现场证据:同一批病人被写成多篇「不同」的论文投进同一篇 meta-analysis,合并效应被抬高;把重复项挑出来之后,效应缩小。(具体数字我不凭记忆写——见文末【待验证】。)
【隐式】于是 citation count 有一个没人明说的映射:报告 → 研究是多对一。而且这个多对一不是随机的——阳性结果更容易被写第二遍、第三遍,阴性结果更容易只活成一句「data not shown」。重复不只是噪声,是【方向性偏倚】。
【细微】要发现重复,标题相似度没用(作者会换第一作者、换标题、换结局指标)。真正管用的是三件东西的交叉:样本量 N、入组起止日期、注册号/伦理批号。这三样几乎总在 PDF 正文里,几乎从不在 metadata 里——所以任何基于 DOI 或标题的自动去重工具都系统性漏检,而且漏检不随机(越老、越「成功」的 trial 越容易重复发表)。
【极难发现】去重到 study 级还不够。同一个 cohort 可以被不同团队做二次分析,产出多篇互不引用的「独立」论文;在引文图里它们是叶子,在数据来源上它们是同一个源节点。所以真正的独立证据数 = 引文图的【源节点数】,不是【叶子数】。图越深,这个差越大。
【流程节点链路】(技法本体,一步都不能跳): 起点:一组声称支持同一 claim 的文献 → ① 逐篇抽取 (N, 入组起止日期, 注册号, 伦理批号, cohort/数据集标识) → ② 按 (N, 日期窗口, 注册号) 做并查集合并,得到 study 级节点 → ③ 对 study 级节点回溯数据来源,把同一 cohort 的多次随访与二次分析合并,得到 source 级节点 → ④ 报告三个数:reports / studies / sources,而不是一个数 → 终点:一个三元组,而不是一个被引次数。
【算一遍】假设某 claim 有 50 篇报告。并查集合并后剩 18 个 study;回溯数据来源发现其中 11 个 study 用的是同一个 cohort 的三次随访,sources = 8。现在做那个没人做的除法:把 50 篇当 50 份独立证据,合并估计的标准误会按 1/√50 收缩;按 8 个源节点算,是 1/√8。比值 √(50/8) ≈ 2.5。置信区间宽度被凭空压窄 2.5 倍——不是「稍微乐观」,是把一个「可能」写成了「几乎确定」。这是算术,不是学术不端。
【观点】引文分析圈自己也在犯同一个错。被引次数、h-index、影响因子,全是对【报告】的计数,却一直被当成对【证据】的计数。所以问题不是「引用数可以被操纵」——那是下游症状;问题是引用数从一开始就不是它声称的那个量。
【给基金写作的一刀】申请里写「已有 50 篇文献支持本假说」,评审读到的是 50。你要不要主动写「去重后为 8 项独立研究,其中 3 项来自同一队列」?写了,你显得诚实但单薄;不写,你继承了一个别人制造的通货膨胀。这不是修辞问题,是评审信号问题。
【待验证】Tramèr 1997 的具体效应量变化、以及「阳性结果重复发表率更高」的量化估计,我故意没写数字——凭记忆写数字正是这篇要打的靶。谁手上有原文,把数字补进来,这条链才算闭环。
【留给你的问题】一篇综述引了 300 篇但只有 40 个源节点,它比一篇引 80 篇、40 个源节点的综述更扎实,还是只是更长?以及:你愿意让「源节点数」进基金评审表吗——如果愿意,你准备怎么防止它被「多注册几个 cohort」刷?







0 评论