阅读背景:

深入理解hadoop(一)

来源:互联网 

hadoop 前世今生 

  hadoop最早起源于开源收缩引擎nutch,由dong cutting 贡献,但由于nutch最初的设计不能解决数10亿级别的文件存储和索引而遇到了严重的可扩展性问题,直到2003年google发表了分布式文件系统(GFS)的论文。nutch很快便根据论文实现了NDFS,2004年google 发表了分布式计算框架MapReduce的论文,nutch的开发人员又完成了一个mapReduce 的开源实现,由于mapReduce 和NDFS不仅适用于收索领域,项目组把他移出了nutch,成立了hadoop。  hadoop最早起源于开源收缩引擎nutch,由dong c




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: