Kafka 重平衡时如何减少重复消费
哪些公司问过
愿为科技1
答案要点
- 原因:新消费者从最后提交位点开始,已处理未提交的消息被重复消费
- 调优 max.poll.interval.ms、max.poll.records、session.timeout.ms,减少误判下线
- 静态成员(group.instance.id)避免短暂重启触发重平衡
- 协作式粘性分配减少分区迁移范围
- 手动提交+ConsumerRebalanceListener 回收前提交位点,业务幂等兜底
易错点
- 开启自动提交又在异步线程处理,位点和处理进度不一致
- 单批拉取过多、处理过慢,频繁超过 poll 间隔被踢出
- 以为调好参数就能完全避免重复,不做幂等
面试官常见追问
- onPartitionsRevoked 里应该做什么?
- 静态成员有什么副作用?
完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。