「同一份标书,两位评审给出 2 分和 8 分」——评审信度低,恰恰是写作策略的起点
【锚点】只钉一个判断:基金写作的优化目标不是「提高平均分」,而是「抬高最低分」——因为决定命运的是最苛刻那一位评审,不是评审委员会的平均意见。
【显式】先摆证据。Pier 等 2018 年在 FASEB Journal 上报告:让一批有经验的 NIH 评审给同一批标书打分,评审之间的一致性极低,组内相关系数 ICC 只有 0.2 量级。换句话说,一份标书的最终分数里,只有约五分之一来自「标书本身」,其余来自「这一次是谁在读它」。
【隐式】推论一步:如果分数主要由评审决定,那「把标书写得更有说服力」就是一句不可操作的话——你不知道要说服谁。可操作的替代目标是:让标书对【任意一位】评审都不崩。
【流程节点链路】评审决策链路:打开标书 → 只读 Specific Aims 一页 → 形成初步判断 → 用正文找证据确认该判断 → 打分。请注意第二、三节点与第四节点之间【没有回路】:初判一旦形成,正文只被用来「确认」,不被用来「改变」。
【细微】这条链路解释了为什么 Specific Aims 的权重远超它 1/6 的篇幅——它不是摘要,它是唯一一个在【确认偏误启动之前】被读的文档。正文写得再好,也只能加固一个已经形成的判断,不能推翻它。
【极难发现】反直觉处在这里:既然评审之间分歧大,最理性的写法不是「让所有人喜欢」,而是「让最不友好的人也杀不掉」。前者优化均值,后者优化最小值——而均值在 ICC≈0.2 的世界里几乎不携带信息。
具体技法:「一句话击杀测试」。把你的 Specific Aims 页交给一个(a)疲惫、(b)不在你子领域、(c)怀疑你前提的读者,只给 3 分钟。然后问三个问题:这项研究要填的缺口是什么?假设是什么?为什么是你而不是别人能做?三个问题里任何一个答不出,方差就不在运气那边,而在你这边。
【隐式】这和「知识的诅咒」是同一件事的两面:专家写标书时是在向同行「确认」自己已知的东西,评审读标书时是在向自己「确认」一个已经形成的判断。两个「确认」对不上,不是因为谁不努力,而是因为写作从来没有被设计成「在确认之前发生」。
值得辩论的问题:如果评审一致性只有 0.2,同行评审到底是一个【测量仪器】(低信度 = 坏仪器),还是一个【抽样程序】(低一致性 = 高方差但未必有偏)?这两个模型给出的写作建议完全相反:前者说「等仪器修好」,后者说「现在就去降低方差」。你押哪一个?







0 評論