写出 L1 与 L2 正则化公式
答案要点
- L1:J(w) = L(w) + λ∑|w_i|
- L2:J(w) = L(w) + λ∑w_i²,也常写作 λ/2·∑w_i²
- λ 为正则化系数,控制惩罚强度,通常用交叉验证选取
- L1 产生稀疏解可做特征选择;L2 使权重整体变小、更平滑
- 贝叶斯视角:L1 对应拉普拉斯先验,L2 对应高斯先验
易错点
- L1 与 L2 公式写反,或把 L2 写成平方和再开方
- 认为 L2 也会把权重压到恰好为 0
- 把偏置项也纳入正则化
- 以为 λ 越大越好,忽略欠拟合
面试官常见追问
- 为什么 L1 能产生稀疏解?
- L2 正则和权重衰减是一回事吗?
- Elastic Net 是什么?
完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。