面试题库 › C++ / 后端 › Spark 的内存管理机制

Spark 的内存管理机制

难度 ★★★在 1 场真实面经中被问到 方向:C++ / 后端考点:大数据组件

哪些公司问过

华勤1

答案要点

  1. 1.6 起采用统一内存管理,堆内先预留 300MB
  2. spark.memory.fraction 默认 0.6 划出统一内存区,其余为用户内存
  3. 统一内存分执行内存和存储内存,storageFraction 默认 0.5
  4. 执行可驱逐超出保护区的存储内存,存储不能驱逐执行内存
  5. 可开启堆外内存减少 GC,容器部署需配置 memoryOverhead

易错点

面试官常见追问

完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。

相关面试题