Hadoop 的核心组件及作用
哪些公司问过
B站1中国工商银行1
答案要点
- 核心组件:HDFS 存储、MapReduce 计算、YARN 资源调度、Common 公共工具
- HDFS:NameNode 管元数据,DataNode 存块,默认 128MB、3 副本、机架感知
- HDFS 高可用:主备 NameNode、JournalNode 共享 edits、ZKFC 加 ZooKeeper;Secondary NameNode 只做元数据合并
- MapReduce:Map 并行处理 → Shuffle 按 key 分区排序 → Reduce 聚合
- YARN:ResourceManager 全局分配,NodeManager 管容器,ApplicationMaster 管单个作业
易错点
- 把 Secondary NameNode 说成热备
- 说不清 YARN 中 ResourceManager 和 ApplicationMaster 的分工
面试官常见追问
- 如何处理 Hadoop 中的数据倾斜?
- Secondary NameNode 是 NameNode 的备份吗?
- HDFS 为什么不适合存大量小文件?
完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。