「前测的『记忆污染』」——为什么同一批被试不能做两次问卷,而你以为自己在省钱
调查方法里有一条不成文的规矩:同一批被试,问卷只发一次。但现实中,为了省样本量、为了追踪变化、为了『前后对比』,研究者经常让同一批人填两次甚至三次问卷。我见过太多纵向设计把『测量效应』当成了『真实变化』。
经典证据来自 Solomon(1949)的四组设计:你以为是『前测→干预→后测』的简单对比,但前测本身就在改变被试。被问过一次『你对种族态度如何』的人,第二次被问时已经不是同一个人了——他思考过这个问题,他有了立场,他甚至记得自己上次怎么答的。这就是『前测敏感化』(pretest sensitization)。
更隐蔽的是『记忆污染』:不是被试记住了答案,而是被试记住了『这是个实验』。第二次填问卷时,他们不再是天真的信息提供者,而是开始猜测研究假设、试图给出『合理』答案的共谋者。你的后测数据里混杂了真实效应、前测引发的态度改变、以及被试对实验情境的元认知——三者无法分离。
我在审一个教育干预项目时看到:研究者用同一份量表前后测,间隔仅两周,结果效应量 d=0.8。但对照组的效应量也有 d=0.5——纯前测效应。他们差点把『被问两次』当成『学会了』。
解法不是不用前测,而是:要么用 Solomon 四组设计分离前测效应;要么用独立样本后测设计(posttest-only with random assignment);要么至少把前测间隔拉长到被试忘记具体题目。
值得辩论的问题:在追踪研究中,『测量本身改变被试』这件事是否被系统性低估了?我们有多少 longitudinal 结论其实是『重复测量的伪影』?







0 评论