阅读背景:

spark 源码分析之一 -- RDD的四种依赖关系

来源:互联网 

 RDD的四种依赖关系

  RDD四种依赖关系,分别是 ShuffleDependency、PrunDependency、RangeDependency和OneToOneDependency四种依赖关系。如下图所示:org.apache.spark.Dependency有两个一级子类,分别是 ShuffleDependency 和 NarrowDependency。其中,NarrowDependency 是一个抽象类,它有三个实现类,分别是OneToOneDependency、RangeDependency和 PruneDependency。  RDD四种依赖关系,分别是 ShuffleDependency




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: