设计拉模式、无锁消费且不重复消费的消息队列
哪些公司问过
答案要点
- 存储:主题分多个分区,每个分区是只追加日志,按偏移量定位,顺序写
- 拉模式:消费者按分区和偏移量批量拉取,无消息时长轮询,避免空轮询
- 无锁:同一消费组内每个分区同一时刻只分配给一个消费者,分区内单线程处理并自维护偏移量
- 重复来源:生产重试、消费后未提交偏移量即崩溃、再平衡,投递语义通常是至少一次
- 防重:消息带唯一 ID,消费端用去重表或 Redis 做幂等,或将业务结果与偏移量同事务提交
易错点
- 多个消费者并发消费同一分区并靠加锁协调,吞吐差且破坏顺序
- 声称队列本身能做到绝对不重复投递,忽略消费端幂等
- 消费前就提交偏移量,处理失败时消息丢失
面试官常见追问
- 拉模式和推模式各有什么优缺点?
- 偏移量什么时候提交?
- 生产端如何避免重复写入?
完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。