Paimon + Flink CDC 生产链路设计与关键点
答案要点
- 链路:Flink CDC 全量加增量读取 → Paimon ODS → 流读分层加工 → 查询
- Exactly-Once 依赖 checkpoint 两阶段提交,快照在 checkpoint 完成后可见
- checkpoint 间隔决定可见延迟和小文件数量,需要权衡
- 提前规划主键、分区、分桶,整库同步处理 schema 演进
- 监控反压、checkpoint 时长、延迟和 compaction 状态
易错点
- checkpoint 间隔过短导致小文件激增
- 以为所有 DDL 都能自动同步,删列、改类型等通常有限制
- 多个 CDC 作业 server-id 冲突导致异常
面试官常见追问
- 整库同步有什么好处?
- 上游 binlog 被清理了怎么办?
完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。