Agent 可观测性:日志、Trace 与监控
哪些公司问过
答案要点
- 一次请求一条 trace,LLM 调用、检索、工具、子 Agent 各为 span
- span 记录输入输出、模型与参数、token、耗时、错误和决策理由,支持回放
- OpenTelemetry 提供 trace、metrics、logs 和上下文传播,并有生成式 AI 语义约定
- 指标:成功率、延迟与首 token 延迟、token 成本、工具成功率、重试与循环次数
- 生产实践:采样、脱敏、成本归因,线上 trace 回流为离线评测集
易错点
- 只记录最终回答,不记录中间步骤和工具返回
- 全量记录敏感数据,没有脱敏和权限控制
- 全量采样导致存储成本过高
面试官常见追问
- 如何用 OpenTelemetry 监控 Agent 调用链?
- 上线后的报警体系怎么设计?
完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。