成语大全网 - 汉语词典 - java中文分词为什么用“ik”?

java中文分词为什么用“ik”?

为什么呢?因为Lucene自带的分词器比较适合英文的分词,而IK首先是一个中文的分词器。

具体的优点先不细说,单说分词的结果来看:

1 比如说 我爱北京

使用自带的分词 我/爱/北/京

IK分词 我/爱/北京

2 可以自己扩展词典

有很多分词器是不能够进行自己扩展词典的,有自己的词典,导致分词的结果才是自己想要的结果。

3 可以自己定义停用词字典

4 和Lucene结合比较高,有很多封装好的模块。用来检索非常顺手。

当然,IK自2012年已经不再维护了。后面有出现了很多其他的分词器。