package IKAnalyzer;

import java.io.IOException;
import java.io.StringReader;
import org.apache.lucene.analysis.Analyzer;
import org.apache.lucene.analysis.TokenStream;
import org.apache.lucene.analysis.tokenattributes.CharTermAttribute;
import org.wltea.analyzer.lucene.IKAnalyzer;

public class test {
	public static void main(String[] args) throws IOException {
		String text = "基于java语言开发的轻量级的中文分词工具包";
		// 创建分词对象
		Analyzer anal = new IKAnalyzer(true);
		StringReader reader = new StringReader(text);
		// 分词
		TokenStream ts = anal.tokenStream("", reader);
		CharTermAttribute term = ts.getAttribute(CharTermAttribute.class);
		// 遍历分词数据
		while (ts.incrementToken()) {
			System.out.print(term.toString() + "|");
		}
		reader.close();
		anal.close();
		System.out.println();
	}
}
最近下载更多
xierhui  LV6 2023年8月29日
15562126884  LV4 2021年4月18日
loveprograming  LV1 2020年7月23日
噗噗猫MMM  LV6 2020年6月11日
dc1323  LV3 2020年3月13日
shishunshun  LV1 2020年3月5日
wjx985  LV2 2019年12月24日
yejiebao  LV1 2019年9月14日
s2w2y2  LV3 2019年7月18日
可是不知道么  LV23 2019年5月23日
最近浏览更多
ljt289917726  LV3 2023年12月18日
xierhui  LV6 2023年8月29日
胡明杨 2023年5月4日
暂无贡献等级
suiyibawokeyi 2022年6月5日
暂无贡献等级
holixie  LV2 2022年5月3日
等你归来  LV2 2022年3月6日
gentleman1576  LV2 2021年12月4日
yinyun1985  LV14 2021年8月12日
1798672867  LV21 2021年7月18日
lxw804  LV2 2021年7月13日
顶部 客服 微信二维码 底部
>扫描二维码关注最代码为好友扫描二维码关注最代码为好友