在Lucene索引的时候已经引出了分词(Analyser)这个慨念，分词也是信息检索的时候重要的一步。我们知道英文一个单词就是一个词，两者直接使用空格天然的隔开，分词就变得很容易了，而汉语的一个句子里面有很多个汉字组成，里面有基本意义的就是词语，单个汉字往往没有对句子有足够的信息，而词语可以说是最小的语义单位。在检索的时候我们一般都是根据词语来匹配的，词语在整片文字中扮演着重要的角色。 在Lucene索引的时候已经引出了分词(Analyser)这
阅读背景：
数据检索---分词算法
来源：互联网
分享到：
