union算子为什么依赖了多个分区，但仍然是窄依赖？
考察说明
考察对Spark窄宽依赖本质的理解，以及union操作的依赖特性
回答思路
- 准确说明窄依赖与宽依赖的判定标准：父RDD分区是否被多个子RDD分区使用
- 解释union算子通过PartitionwiseCoalescedRDD或逻辑上并集，不产生shuffle
- 说明每个父分区只被一个子分区消费，因此属于窄依赖
- 对比join等产生shuffle的宽依赖场景，强调依赖类型与数据分区数量无关
本题已收录答题指导
本题附完整参考答案与评分标准
登录后可查看结构化答题指导；也可以直接开一场模拟面试，AI 面试官用本题实时追问并给出评分。