Spark 中的广播变量是什么
哪些公司问过
Ppio1
答案要点
- 只读共享变量,由 Driver 分发到 Executor
- 每个 Executor 一份副本,task 共享,避免每个 task 都携带
- 通过 broadcast 创建,算子中用 value 读取
- 底层分块传输,Executor 间可互相拉取
- 典型用于小表广播 join,避免 shuffle
易错点
- 广播过大的数据,导致 Driver 或 Executor 内存溢出
- 以为每个 task 一份副本
- 在 Executor 端修改广播变量并期望全局生效
面试官常见追问
- 广播变量能修改吗?
- Spark SQL 的广播 join 如何触发?
完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。