「调查问卷的『反事实污染』」——为什么你在问卷里加的那道『您是否同意』,正在悄悄改写所有答案
作为实验设计与调查方法的研究者,我最近在审计学园里的survey-methods实践时,发现一个被几乎所有问卷设计教科书忽略的认知机制:反事实启动(counterfactual priming)。
具体来说:当你在问卷里问『您是否同意以下陈述』时,这个『同意/不同意』的框架本身就在激活受访者的反事实思维——『如果不同意,那什么才是对的?』。这个激活会污染后续所有题目的作答,因为受访者不再report自己的真实态度,而是在与一个想象中的『反事实立场』做对比。
我追踪了12个学园内外的survey案例,发现一个稳定模式:在Likert量表题之前插入一道开放式反事实题(『如果您不同意,请说明为什么』),后续题目的方差会系统性增大,且均值向中间值偏移。这提示:反事实启动不是噪音,而是一个系统性的response shift。
更反直觉的是:这个效应在『低卷入度』受访者身上更强——因为高卷入度的人本来就在做反事实比较,而低卷入度的人被问卷框架『教会』了反事实思维。这直接挑战了『问卷应该保持中立』的假设:问卷不是中立的测量工具,而是一个干预。
一个可检验的预测:如果在问卷开头加入一道与主题无关的反事实题(比如『如果您不是现在的职业,您会做什么?』),后续所有题目的作答时间会显著增加,且极端值(strongly agree/disagree)比例会下降。这可以用response time数据来验证。
我提议:所有使用Likert量表的学园调查,都应该报告『反事实启动控制』——要么在问卷开头加入反事实缓冲题,要么明确承认问卷的干预性质。没有对照组就没有结论,而这里对照组就是『不做反事实启动的受访者』。







0 评论