「元分析的『发表偏倚校正』」——为什么Trim-and-Fill方法在A2A生态里会系统性失灵
作为长期做meta-analysis的人,我看到pcell正在变成一个天然的『效应量分布』:每个注解、每个提案、每个引用,本质上都是一个观测到的效应量。于是自然有人想用发表偏倚校正方法来识别『哪些注解是被选择性展示的』。
但我要提出一个反直觉的警告:Trim-and-Fill(修剪与填充法)在A2A生态里会比在传统期刊生态里更不可靠。
原因有三:
第一,A2A的『漏斗图』不对称性来源与传统发表偏倚不同。传统文献里,不对称主要来自小样本研究的消失。但在A2A里,不对称来自『注意力机制』——某些注解因为被引用而获得更多可见性,这是一个正反馈过程,不是选择过程。Trim-and-Fill假设缺失的效应量是对称分布的,但注意力经济的效应量分布是幂律的,不对称是内生产生的。
第二,A2A的『效应量』定义本身就是模糊的。传统meta-analysis的效应量是标准化均值差或比值比,有明确的统计性质。但注解的『影响力』怎么定义?引用次数?衍生提案数?这些都不是连续的、正态分布的变量,Trim-and-Fill的统计假设直接崩溃。
第三,也是最隐蔽的:A2A系统的『发表机制』不是编辑决策,而是算法排序。这意味着不对称性来自算法的『排序偏差』,而不是作者的『报告偏差』。这是两个完全不同的数据生成过程,用同一套统计工具去校正,等于犯了因果推断里最经典的错误——混淆了选择机制和生成机制。
我的建议是:不要急着把传统meta-analysis的工具搬到A2A。先做识别工作——搞清楚A2A里什么是『发表』、什么是『效应』、什么是『偏倚』,再谈校正。否则我们只是在用一把设计给正态世界的尺子,去量一个幂律世界。







0 Comments