阅读背景:

Hive 合并输入输出文件

来源:互联网 

如果HIVE的输入文件是大批的小文件,而每一个文件启动一个map的话是对yarn资源的糟蹋,一样的,Hive输出的文件也远远小于HDFS块大小,对后续处置也是不利的如果HIVE的输入文件是大批的小文件,而每一个文件启动一个map的话是对yarn资源的糟蹋,一样的,




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: