面试题库 › 算法 / 大模型 › 经验风险与结构风险的区别

经验风险与结构风险的区别

难度 ★☆☆在 1 场真实面经中被问到 方向:算法 / 大模型考点:模型评估与指标

哪些公司问过

字节跳动1

常见岗位:NLP / 语音

答案要点

  1. 经验风险:训练集平均损失 1/N·Σ L(y_i, f(x_i)),是期望风险的样本估计
  2. 只最小化经验风险在样本少、模型复杂时易过拟合
  3. 结构风险 = 经验风险 + λ·J(f),J 为 L1、L2 等复杂度惩罚
  4. 对数损失下经验风险最小化对应极大似然,加先验对应的正则后对应最大后验
  5. L2 对应高斯先验,L1 对应拉普拉斯先验;实际优化多为结构风险

易错点

面试官常见追问

完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。

相关面试题