阅读背景:

Hadoop2.6.0运行mapreduce之Uber模式验证

来源:互联网 

前言

在有些情形下,运行于Hadoop集群上的一些mapreduce作业本身的数据量其实不是很大,如果此时的义务分片很多,那末为每一个map义务或reduce义务频繁创立Container,必将会增长Hadoop集群的资源消费,并且由于创立分配Container本身的开消,还会增长这些义务的运行时延。如果能将这些小义务都放入少许的Container中履行,将会解决这些问题。好在Hadoop本身已供给了这类功效,只须要我们懂得其原理,并运用它。在有些情形下,运行于Hadoop集群上的一些mapreduce作业本身的数据量其实不是很大,如




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: