面试题库 › Java 后端 › HDFS 副本机制与写入时的数据同步

HDFS 副本机制与写入时的数据同步

难度 ★★☆在 1 场真实面经中被问到 方向:Java 后端考点:大数据组件

哪些公司问过

Shopee1

常见岗位:软件开发

答案要点

  1. 块默认 3 副本,机架感知放置:本地节点、另一机架、与第二个同机架的另一节点
  2. 写入流水线:NameNode 分配 DataNode 列表,客户端按 packet 发送,节点逐级转发,ack 反向返回
  3. 客户端维护数据队列和确认队列,全部节点确认后 packet 才算写成功
  4. 节点故障:剔除坏节点继续写,更新版本戳淘汰旧副本,NameNode 根据块汇报补足副本
  5. HDFS 一次写入多次读取,不支持随机修改,只支持追加

易错点

面试官常见追问

完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。

相关面试题