面试题库 › C++ / 后端 › AB 实验:为什么抽样、如何保证置信、p 值 0.06 怎么解读

AB 实验:为什么抽样、如何保证置信、p 值 0.06 怎么解读

难度 ★★★在 7 场真实面经中被问到 方向:C++ / 后端考点:AB 实验与因果推断

哪些公司问过

美团3字节跳动2蚂蚁集团1小垃圾秋招记录1

常见岗位:推荐搜索广告、产品经理、机器学习算法(泛)

答案要点

  1. 抽样是因为无法对全部用户做实验,需用样本推断总体
  2. 随机分流保证两组无系统性差异,差异才能归因于策略
  3. 事先做功效分析确定样本量,覆盖完整周期,核对样本比例
  4. p=0.06:原假设成立时观察到当前或更极端差异的概率为 6%,大于 0.05,不能拒绝原假设,但不等于无效
  5. 不显著的原因:样本不足、效应小、方差大、设计问题;放量后消失:新奇效应、多重检验、样本偏差

易错点

面试官常见追问

完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。

相关面试题