阅读背景:

spark 大型项目实战(三十九): 算子调优之filter过后使用coalesce减少分区数量_u012957549的博客

来源:互联网 

下面给出一种filter 的情况

默认情况下,经过了这种filter之后,RDD中的每个partition的数据量,可能都不太一样了。(原本每个partition的数据量可能是差不多的)默认情况下,经过了这种filter之后




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: