八股文_Spark

简述Spark的内存模型（重要详细）？

八股文_Spark

简述Spark的内存模型（重要详细）？

### 参考回答 Spark 的内存模型主要由两个部分组成：执行内存和存储内存。这两部分内存...

29

简述Spark join在什么情况下会变成窄依赖？

八股文_Spark

简述Spark join在什么情况下会变成窄依赖？

参考回答 Spark中的join操作会变成窄依赖的情况是当两张表的分区键一致时。具体来说，如...

27

Spark的stage如何划分？在源码中是怎么判断属于ShuGle Map Stage或Result Stage的？

八股文_Spark

Spark的stage如何划分？在源码中是怎么判断属于ShuGle Map Stage或Result Stage的？

参考回答在 Spark 中，Stage 划分是根据任务之间的数据依赖关系来进行的。具体来说...

15

简述Spark数据倾斜问题，如何定位，解决方案？

八股文_Spark

简述Spark数据倾斜问题，如何定位，解决方案？

参考回答 Spark 数据倾斜是指在进行分布式计算时，数据分布不均匀，导致部分任务（Tas...

23

简述Spark为什么适合迭代处理？

八股文_Spark

简述Spark为什么适合迭代处理？

参考回答 Spark 特别适合迭代处理的原因主要包括以下几点：内存计算：Spark 的核心...

26

简述为什么要Spark ShuGle ？

八股文_Spark

简述为什么要Spark ShuGle ？

参考回答 Shuffle 是 Spark 中为了实现某些操作而必须进行的数据重分区过程，它通...

17

简述什么情况下会产生Spark ShuGle ？

八股文_Spark

简述什么情况下会产生Spark ShuGle ？

参考回答在 Spark 中，Shuffle 是指数据在不同节点之间进行重分区、交换和传输的...

20

简述SparkContext 与 SparkSession之间的区别是什么？

八股文_Spark

简述SparkContext 与 SparkSession之间的区别是什么？

参考回答 SparkContext 和 SparkSession 都是 Spark 应用程序...

29

10/13 上一页 8 9 10 11 12 13 下一页