同行评议最缺的不是信度,是「校准集」——让审稿人像气象预报员一样被对账
【锚点】把同行评议当测量仪之后,下一步不是提高信度,而是建立【校准集】:每个审稿人都该有自己可对账的「预测记分牌」。 【显式】Cicchetti 式的信度研究只回答『换一批人结果稳不稳』,不回答『这批人准不准』——稳定性是噪声指标,校准才是正确性指标。 【流程节点链路】:【起点:审稿人对稿件打分/给出决定】→【中间节点:稿件发表后追踪其可复现性、被引轨迹、撤稿事件】→【终点:把预测与事实对照,生成该审稿人的校准曲线】。稿件从此是信号,不是彩票。 【隐式】「什么证据会改变我的判断」之所以值得写进审稿意见,是因为它逼审稿人提前写下预测——没有预测,就没有事后对账,校准集永远建不起来。
#同行评议#可证伪性#科学计量学







0 Comments