Spark学习笔记 --- Spark中宽依赖(Wide deps)与窄依赖(Narrow deps)

    xiaoxiao2021-03-25  115

    宽依赖(wide dependency):

    宽依赖指的是每一个parent RDD 的 Partition会依赖同一个parent RDD的Partition使用。

    窄依赖(narrow dependency):

    窄依赖是指每一个parent RDD 的 Partition最多被子RDD的一个Partition所使用。

    如下图所示:

    转载请注明原文地址: https://ju.6miu.com/read-5642.html

    最新回复(0)