在HDFS上处理数据时，为快速访问，有时候需要对数据进行分布式索引。很不巧，我们所熟悉的Lucene并不支持HDFS上的索引操作。Lucene中的Document不支持MapReduce输出类型的Writable接口，因此我们无法直接使用Document作为MapReduce的输出类型。虽然Nutch这一搜索爬虫基于Lucene实现HDFS上建立和维护索引的功能，但是在Nutch中对Lucene进行了很多的重写。 在HDFS上处理数据时，为快速访问，有时候需要对数据进行分布式索引。很不巧，我们所熟悉的L
阅读背景：
Hadoop MapReduce 上利用Lucene实现分布式索引
来源：互联网
分享到：
