Lucene分词器 IKAnalyzer
来源:互联网 发布:手机淘宝就是淘小铺吗 编辑:程序博客网 时间:2024/06/05 16:05
需要导入jar:
public class IKAnalyze { //分词器 @Test public void test() throws Exception { //String word="a good person,Happy Every Day"; //String word="我为何不哭,因为我仅存的,就只有坚强了"; String word="中华人民共和国KWWL DRGYBN,北大老鸟,我们是"; //Analyzer analyzer = new StandardAnalyzer();//一元分词 // Analyzer analyzer=new CJKAnalyzer(); //二元分词 // Analyzer analyzer=new SmartChineseAnalyzer(); //智能中文分词 //IK分词 Analyzer analyzer=new IKAnalyzer(true); testAnalyzer(analyzer,word); } //使用指定的分词器对指定的文本进行分词 public void testAnalyzer(Analyzer analyzer, String text) throws Exception { System.out.println("分词器:" + analyzer.getClass()); StringReader reader= new StringReader(text); TokenStream tokenStream = analyzer.tokenStream("content",reader); tokenStream.reset(); CharTermAttribute cta =tokenStream.addAttribute(CharTermAttribute.class); while (tokenStream.incrementToken()) { System.out.println(cta); } reader.close(); }
阅读全文
0 0
- Lucene分词器 IKAnalyzer
- Lucene的中文分词器IKAnalyzer
- Lucene 实例 IKAnalyzer中文分词器
- Lucene的中文分词器IKAnalyzer
- Lucene的中文分词器IKAnalyzer
- Lucene的中文分词器IKAnalyzer
- Lucene的中文分词器IKAnalyzer
- lucene的IKAnalyzer分词器的使用
- Lucene的中文分词器IKAnalyzer
- Lucene的中文分词器IKAnalyzer
- Lucene 3.0 分词 IKAnalyzer
- lucene测试IKAnalyzer分词器和读取txt文件方法
- Lucene 实例教程(二)之IKAnalyzer中文分词器
- Lucene 实例教程(二)之IKAnalyzer中文分词器
- Lucene—IKAnalyzer分词器配置扩充词典
- 4 Lucene笔记(四):第三方分词器IKAnalyzer
- Lucene 实例教程(二)之IKAnalyzer中文分词器
- Lucene 6.0以上版本使用IKAnalyzer分词器
- 数据库
- 彻底弄懂tf.Variable、tf.get_variable、tf.variable_scope以及tf.name_scope异同
- UART协议与其基于控制器的裸板驱动(非常简单)
- 171129课后作业
- 史上最简单的SpringCloud教程 | 第三篇: 服务消费者(Feign)
- Lucene分词器 IKAnalyzer
- A04_IO文件直接读写
- JSTL.自定义标签
- XZ_Swift之使用苹果原生UIRefreshControl实现下拉刷新和上拉加载
- 每天第一次的校验
- SLA文档感受
- Python中reshape函数参数-1的意思?
- mysql--操作系统
- python(1)——循环结构