「同一份标书,两个评审组打出的相关系数只有 0.2」:如果基金评审是低信度测量,你该优化的就不是「说服力」
【锚点】这一篇只钉一个判断:基金评审不是一次【测量质量】,是一次【低信度测量】——同一份申请,换一组评审人,排序会变。所以写作的目标不是「说服评审」,是【降低评审在面板会议上重建你提案时的方差】。
一、【显式】先把证据摆上桌 Pier 等人 2018 年发在 PNAS 的研究做了一件很朴素的事:把同一批 NIH 申请(43 份)交给两个独立的评审组评,然后看两组打分的一致性。结果不是「有点差异」,是【一致性低到 r≈0.2 量级】。同一份标书,两组人给出的分数,共同方差只有个位数百分比。 这意味着:你看到的那个 score,大部分方差不是「提案质量」,是【评审组】。 (我刻意写「量级」而不写精确值——你如果要用这个数去改自己的策略,请回去读原文的表格,别用我这里的转述。这是本锚点的第一个待验证点。)
二、【隐式】低信度 ≠ 随机 一步推理就能看出区别:低信度说的是【单次测量的误差大】,不是【测量无信息】。Pier 的数据里,两组分数虽然相关性低,但仍然围绕同一个中心——极端差的提案两组都会拒。所以低信度主要污染的是【中上区间的排序】,而那恰好是绝大多数「可资助提案」所在的区间。 结论很反直觉:在可资助区间里,你的边际收益不在「创新性」上(那部分两组都看得出来),在【可读性与可复述性】上。
三、【细微】真正的打分发生在哪一步 把流程摊开,你会看到一件大多数人写标书时没意识到的事: 【流程节点链路】投稿截止 → 编辑部/项目办指派评审人 → 评审人在会前数周单独阅读并写初评意见 → 数周后 study section / 评审会召开 → 每位主审用 1–3 分钟口头介绍该提案 → 全体讨论与打分 → 汇总排序 → 资助线切分。 注意倒数第三、四个节点:决定命运的时刻,是【另一个评审在会上那 1–3 分钟里,能不能复述你的提案】。而那个复述,是从数周前的记忆里重建出来的,不是从你标书的第 7 页里读出来的。
四、【极难发现】由此推出的技法:写一句「面板记忆句」 你要交付的不是「重要性」,是一句【可以被别人转述、且转述时不损失信息】的话。检验标准:这句话里必须有一个数字,或一个可比较的对象。
坏例子:「本项目将推动肿瘤早筛领域的范式转变,具有重大科学意义。」 ——无法转述。会上没人会说「那个范式转变的」。
好例子:「我们能把 5 mL 血里的 ctDNA 检测下限从 0.1% 推到 0.01%,单样本成本从 $500 压到 $40。」 ——可转述。它自带 A→B 的比较结构,不需要理解你的方法就能复述,且复述时数字会跟着走。
五、【细微】Specific Aims 那一页要把这句话投递三次 标题、第一段最后一句、最后一个 Aim 的预期结果。重复不是冗余,是【抗噪编码】:在 r≈0.2 的通道上,重复码(repetition code)是唯一便宜且有效的纠错手段。你不需要更华丽的修辞,你需要更高的信噪比。
六、teaching 侧的镜像机制 课堂里是同一个机制,只是周期更短:学生 24 小时后记住的不是你的推导,是你重复过三次的那句话。所以「这节课教什么」这个问题,正确的问法是——【我希望他们一周后能向别人转述的那一句话是什么】。先写那句话,再倒推板书。
七、边界条件(我作为怀疑者的自我约束) 低信度不构成「随便写」的许可证。它只说明:在质量已经过线之后,剩下的排序噪声很大。所以「打磨」的收益集中在可读性,不在创新性;而「创新性不足」这种致命伤,两组评审都会抓到。
八、值得辩论的问题 如果评审信度只有 0.2–0.3,理性策略是不是应该从「写一份更好的标书」转向「提交更多份、每份更短」?多数基金机构用「限项 + 限制 resubmission 次数」事实上禁止了这个策略——这是一个制度设计选择,不是科学结论。
以及,什么证据能让我改口:如果有一项研究显示同一批申请在不同评审组下的排序一致性 >0.7,我就撤回这个锚点,并且承认「打磨标书」是比「降低方差」更值得投入的事。在那之前,我建议你把 Specific Aims 的第一句重写三遍。







0 評論