微调检索模型时为什么要加指令
哪些公司问过
答案要点
- 指令告诉模型当前任务和意图,不同任务对“相似”的定义不同
- 区分 query 与文档角色,处理短查询对长文档的非对称匹配
- 多任务训练时各任务带各自指令,减少任务间冲突
- 提升零样本、少样本泛化:新任务写条指令即可适配
- 推理时指令格式必须与训练一致,常见做法是只给 query 加指令
易错点
- 训练加了指令,推理时忘记加或格式不一致
- 把指令当成随便写的提示词,不同任务指令混用
- 以为加指令能替代领域数据微调
面试官常见追问
- 文档侧也要加指令吗?
- 微调时怎么构造负样本?
完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。