面试题库 › 算法 / 大模型 › 机器学习中的正则化方法

机器学习中的正则化方法

难度 ★★☆在 2 场真实面经中被问到 方向:算法 / 大模型考点:模型评估与指标

哪些公司问过

阿里巴巴1今日头条1

常见岗位:机器学习算法(泛)、NLP / 语音

答案要点

  1. 正则化限制模型复杂度,防止过拟合,提高泛化
  2. L1:权重绝对值之和,产生稀疏解,可做特征选择
  3. L2:权重平方和,让权重整体变小,不为 0,更平滑
  4. 其他:Dropout、早停、数据增强、批归一化、标签平滑
  5. 权重衰减在 SGD 下等价于 L2,Adam 下不等价,因此用 AdamW

易错点

面试官常见追问

完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。

相关面试题