HDFS 副本机制与写入时的数据同步
哪些公司问过
答案要点
- 块默认 3 副本,机架感知放置:本地节点、另一机架、与第二个同机架的另一节点
- 写入流水线:NameNode 分配 DataNode 列表,客户端按 packet 发送,节点逐级转发,ack 反向返回
- 客户端维护数据队列和确认队列,全部节点确认后 packet 才算写成功
- 节点故障:剔除坏节点继续写,更新版本戳淘汰旧副本,NameNode 根据块汇报补足副本
- HDFS 一次写入多次读取,不支持随机修改,只支持追加
易错点
- 以为客户端会同时把数据发给 3 个副本,实际是管道逐级转发
- 以为 HDFS 支持原地修改文件内容
- 以为一个节点写失败整个写入就失败
面试官常见追问
- NameNode 怎么知道副本数不够?
- 写入时是不是要 3 个副本都写完才算成功?
- 写入中途读者能看到新数据吗?
完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。