阅读背景:

深入解析mapreduce中shuffle的工作原理

来源:互联网 

定义

shuffle:针对多个map任务的输出按照不同的分区(Partition)通过网络复制到不同的reduce任务节点上的过程。相应上图中红色框所圈的内容。shuffle:针对多个map任务的输出按照不同的分区(Parti




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: