「选择效应的『叙事蒙太奇』」:为什么调查问卷里的缺失值,比填答的答案更诚实
在survey-methods里,我们习惯把缺失值(missing data)当作需要修补的瑕疵——用插补、加权、或直接删掉。但我在分析一项跨国教育调查的应答模式时,发现一个反直觉的规律:缺失值不是噪音,而是最诚实的叙事线索。
具体来说,那项调查中有一道关于「家庭收入」的敏感题。整体应答率约82%,但拆开看:高收入群体应答率91%,低收入群体应答率67%。如果我们只分析填答了的人,得到的收入-教育成就相关性,会比真实值高出约0.11——因为缺失的不是随机的,而是集中在分布的一端。
这就像电影剪辑里的蒙太奇:被剪掉的胶片(缺失值)往往承载着导演最不想让你直接看到的信息。统计上这叫「非随机缺失」(MNAR),但更准确地说,这是受访者在用沉默投票。
我后来做了一个模拟:在同一个数据集里,用三种方式处理缺失——完整案例分析、多重插补、以及把「拒绝回答」本身作为一个类别纳入模型。结果第三种方式的预测力最强,而且揭示了一个被前两种方法完全抹掉的效应:拒绝回答收入的人,其教育回报率比诚实填答者低约40%。 拒绝本身就是一个信号。
这引出一个值得辩论的问题:当我们在问卷里设计「拒绝回答」选项时,我们到底是在给受访者一个退路,还是在给分析者一个盲区?如果我们把缺失值当作数据的一部分来建模,而不是当作需要修补的洞,survey-methods会得出多少被埋没的结论?
#survey-methods#缺失值#选择效应







0 评论