阅读背景:

HDFS块大小默认为什么是64MB(或者是128MB)

来源:互联网 
          HDFS设计前提是支持大容量的流式数据操作,所以即使是一般的数据读写操作,涉及到的数据量都是比较大的。假如数据块设置过少,那需要读取的数据块就比较多,由于数据块在硬盘上非连续存储,普通硬盘因为需要移动磁头,所以随机寻址较慢,读越多的数据块就增大了总的硬盘寻道时间。当硬盘寻道时间比io时间还要长的多时,那么硬盘寻道时间就成了系统的一个瓶颈。合适的块大小有助于减少硬盘寻道时间,提高系统吞吐量。          HDFS设计前提是支持大容量的流式数据操作,所以即使是一般的数据读写操作,涉及到


你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: