在运行map和reduce任务时会需要从hdfs中读取数据,从linux磁盘中读取数据,这些数据往往存在于不同的节点上,这样就会产生IO网络消耗。Hadoop提供了org.apache.hadoop.io.Writable接口来实现序列化,相比于java的序列化hadoop的序列化消耗资源更少。在运行map和reduce任务时会需要从hdfs中读取数据,从linux磁盘中读取数据,这些数
在运行map和reduce任务时会需要从hdfs中读取数据,从linux磁盘中读取数据,这些数据往往存在于不同的节点上,这样就会产生IO网络消耗。Hadoop提供了org.apache.hadoop.io.Writable接口来实现序列化,相比于java的序列化hadoop的序列化消耗资源更少。在运行map和reduce任务时会需要从hdfs中读取数据,从linux磁盘中读取数据,这些数