面试题库 › 算法 / 大模型 › 如何评估微调后的模型确实有提升

如何评估微调后的模型确实有提升

难度 ★★☆在 2 场真实面经中被问到 方向:算法 / 大模型考点:模型评估与指标

哪些公司问过

字节跳动2

常见岗位:大模型算法

答案要点

  1. 测试集与训练集严格隔离,做去重和数据泄漏检查
  2. 在同一推理配置下对比微调前后,指标按任务选择(准确率、F1、通过率、裁判模型打分)
  3. 同时测通用能力基准,检查灾难性遗忘
  4. 人工盲评计算胜率,上线前做小流量 A/B 测试
  5. 结合训练/验证曲线和多次采样,排除过拟合和随机波动

易错点

面试官常见追问

完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。

相关面试题