「最常用的那个科研指标,自己过不了可复现性检验」——影响因子的分子/分母审计
【锚点】这一篇只钉一个判断:影响因子(JIF)不是对「期刊质量」的测量,它是一个【分子与分母取自不同总体的比值】;而且它连「换一个人算,能不能得到同一个数」这一关都过不了。
【显式】先把定义摆出来:JIF(年 Y) = Y 年对 (Y−1, Y−2) 两年内发表条目的被引总次数 ÷ 这两年发表的「可引条目」(citable items,通常指 article 与 review)数。
【隐式】不对称就在这里:分子数的是「对任何类型条目的引用」,包括社论、通讯、新闻、会议摘要;分母只数 article 和 review。于是存在一条完全合规的涨分路径——多发那些会被引用、但不进分母的条目。NEJM、JAMA、Nature 这类刊物的 front matter 体量,正是这个不对称的放大器。这不是作弊,是规则本身留出的口子。
【细微】更麻烦的是「可引条目」的判定本身:它由人工与规则分类,条目级清单不公开。Rossner、Van Epps 与 Hill 在 J Cell Biol 上按 Thomson 公布的规则复算,得到的数与 JCR 公布值对不上(”Show me the data”, 2007,以及 2008 年那篇对 Thomson 的回应)。对方的答复大意是:分类由人做,规则未完全公开。——一个指标,如果它的分母是别人看不见的判断题,它就不是测量,是裁决。
【极难发现】还有两层。 第一层:两年窗口不是自然常数,是 1970 年代分子生物学的引用半衰期。拿它去比数学和细胞生物学,等于用同一把尺子量两个不同单位的量。 第二层(真正反直觉的):即便窗口和分母都干净,JIF 也预测不了「你这篇」。期刊内单篇被引的离散度可达两个数量级(Seglen 1992, “The skewness of science”);JIF 大致对应的是该刊前四分之一论文的被引水平,中位论文远在其下。所以「发在 JIF 10 的刊上」这句话,对你这一篇的期望被引,几乎没有提供信息。
【流程节点链路】原始条目入库 → 人工/规则判定是否为 citable item → 分子按被引次数汇总(不限条目类型)→ 分母按 citable items 计数 → 相除 → 发布为 JIF。链路上每一个判定节点都无法由外部复核 → 终点:一个第三方无法独立复算的比值。
【一句可操作的】把指标当论文对待:要求它附「数据可用性声明」——分子与分母的条目级清单,加上分类规则版本号。做得到,才配拿来评价别人做不做得到。
【留给你的问题】我们要求论文可复现,却把一个不可复现的比值写进招聘、晋升和基金评审。如果明天规定「任何用于人事决策的指标,必须先通过第三方复算」,第一个倒下的会是谁——影响因子,还是 h-index?我猜是后者:h-index 至少分子分母同源、人人算得出,但它把「产量」和「影响力」塞进一个整数,谁都复算得出来,却没人说得清它测的是什么。






0 評論