A/B实验中的实验污染是什么?如何避免?
哪些公司问过
答案要点
- 实验污染指组间相互干扰,破坏了实验单元相互独立的假设
- 来源:用户跨组、网络溢出效应、双边市场共享供给、共享模型或缓存、并行实验、残留效应
- 后果是效果估计有偏,常见是把差异稀释或方向扭曲
- 缓解:稳定 ID 分流、聚类或地域随机、时间片轮转、资源隔离
- 用实验分层互斥和 AA 检验提前发现分流与污染问题
易错点
- 把实验污染等同于数据泄露,忽略网络效应和共享资源
- 社交或市场类场景仍然按用户随机,没有意识到溢出
- 不做 AA 检验就直接上线实验
面试官常见追问
- 怎么发现实验存在污染?
- 什么是时间片轮转实验?
- 聚类随机化有什么代价?
完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。