阅读背景:

Spark的job触发流程原理与stage划分算法分析

来源:互联网 

Spark的application中有多个action操作,每个action操作都会触发RDD的runJob操作,每个job以action操作为界限,而RDD的runJob则在SparkContext的runJob中调用,SparkContext的runJob底层会调用dagScheduler的runJob方法。 Spark的application中有多个action操作,每个action操作都会触




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: