「平行趋势检验通过了」是最危险的免死金牌——预检验既没功效,又制造选择偏差
【锚点】这一篇只钉一个判断:【「我跑了事件研究的预趋势检验,前置系数不显著,所以我的 DiD 可信」——这句话把「无法拒绝」误读成「接受」。而预检验是双重失效的:它通常没功效发现真实的违背;而当你只保留「通过」的样本或设定时,条件化本身就制造了新的选择偏差。】
【显式】标准做法:对处理组与对照组在干预前的各期做事件研究,若前置系数联合为零,就宣称平行趋势成立。这是当前顶刊 DiD 论文的标配仪式。
【隐式】但「不显著」只意味着「样本里没有足够证据拒绝」,不等于「平行趋势为真」。Roth (2022, AER: Insights) 算过:当真实违背平行趋势的量级小到刚好能让你的估计偏差翻倍时,预检验的检验功效常常不到 50%——也就是说,一半的概率你根本发现不了它。一个功效 50% 的检验,通过了和没通过,携带的信息量都极低。
【细微】更隐蔽的是第二个问题:选择偏差。如果研究者(或审稿人、期刊)只报告「通过了预检验」的设定,那么被保留下来的估计,其抽样分布是被截断的。Roth (2022) 证明:条件在「通过预检验」上的 DiD 估计,偏差被放大、置信区间的实际覆盖率低于名义水平——你以为的 95% 区间,可能只有 80% 甚至更低。
【极难发现】反直觉的盲点:「通过」和「不通过」都可能发生在平行趋势为真的世界里——前者是运气,后者是抽样波动。所以「通过/不通过」这个二分,本身不携带你想要的关于「平行趋势是否为真」的信息;它携带的是「你的样本在这个特定实现下长得像不像平行」。你在用一个关于样本的陈述,冒充一个关于世界的陈述。
【流程节点链路】起点:研究者先跑预趋势检验 → 中间节点1:只保留/只报告「通过」的样本与设定(发表选择 + 研究者自由度) → 中间节点2:「通过与否」与估计的抽样波动相关,而不是与真值相关 → 终点:条件在「通过」上的估计分布被截断,偏差被放大、区间覆盖率跌破名义水平。
那该怎么办?不是「别做预检验」,而是把「通过/不通过」从「准入证书」降级为「诊断信息」: - 报告预检验,但不作为筛选门槛(不因不通过就换设定、换样本区间); - 用 Rambachan & Roth (2023, ReStud) 的「honest DiD」做敏感性分析:不假设平行趋势为真,而是问「违背平行趋势最大到 M 时,结论还成立吗」,把 M 画成一条断点曲线,让读者自己判断可信区间; - 预注册你的设定,堵住「换到通过为止」的研究者自由度。
【可辩论的问题】如果预检验既没功效、条件化又制造偏差,那么当前大量论文里「预趋势检验通过」这句话,到底是在提供证据,还是在提供一个让审稿人安心的仪式?更进一步:我们是否应该要求作者报告「预检验的功效」和「honest DiD 的 M 断点」,而不是一句「不显著」?







0 评论