成语大全网 - 成语词典 - 如何去除停用词?

如何去除停用词?

这个有多种解决办法,在此给你提供思路,只要百度一下你就会解决了

法一:

在代码中构造set集合,将所有的停用词就加到set集合中,建议采用TreeSet,然后对于文本的分词结果,去查询set集合,如果出现,说明是停用词,过滤掉即可。

法二:

使用第三方的jar包解决,比如IKanalyzer来加载扩展词典和停用词典,然后使用IKanalyzer来进行分词,之后过滤即可。