阅读背景:

MapReduce对大数据进行排序的实践

来源:互联网 

从一个小的例子开始:


Map和reduce之间的shuffle(洗牌)是将key值相同的放在一块,sort(排序)是按照key值进行排序.例如like出现了两次,就会把like放在一起.you也是.然后根据key值进行按照字典的顺序进行排序.下面我想将下面的数据按照时间进行排序,并且ID相同的在一块.具体的数据格式:(数据简化成如下,其实还包含其他的一些数据)Map和reduce之间的shu




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: