笔记-2003-Chinese Word Segmentation as LMR Tagging
来源:互联网 发布:连接助理软件 编辑:程序博客网 时间:2024/06/06 15:11
Chinese Word Segmentation as LMR Tagging
作者:Nianwen Xue,LibinShen
单位:Inst. for Research in Cognitive Science;UniversityofPennsylvania
出处:Proceedings of the Second SIGHAN Workshop on Chinese Language Processing, July 2003, pp. 176-179.
主要内容:确定了标注体系LMR;MEMM方法;迭代次数与效果分析
这个算法基于MEMM模型。
因为,MEMM有标注偏置问题,所以采用了左到右,右到左两向分词。
并使用Transformation—Based Learning去合并结果。
实事证明,两向分词并没有显著好于单向分词。目前结果 Academia Sinica是95.9%,Hong Kong City是 91.6%
对于不同的训练语料,迭代次数不同,过度拟合反而会使效果下降。
- 笔记-2003-Chinese Word Segmentation as LMR Tagging
- 笔记-2003-Chinese Word Segmentation as Character Tagging
- 笔记-2006-Subword-based Tagging by Conditional Random Fields for Chinese Word Segmentation
- 笔记-2004-Adaptive Chinese Word Segmentation
- 笔记-2012-Unsupervized Word Segmentation the case for Mandarin Chinese
- 笔记-2002-Combining Classifiers for Chinese Word Segmentation
- 笔记-2004-2007-A Hybrid Approach to Word Segmentation and POS Tagging
- use paoding chinese word segmentation in solr
- tagging笔记
- 搜索引擎之中文分词(Chinese Word Segmentation)简介
- 搜索引擎之中文分词(Chinese Word Segmentation)简介
- 搜索引擎之中文分词(Chinese Word Segmentation)简介
- 外文翻译_A Search-based Chinese Word Segmentation Method
- 搜索引擎之中文分词(Chinese Word Segmentation)简介
- 中文分词文献列表 Bibliography of Chinese Word Segmentation
- [ACL2017]Adversarial Multi-Criteria Learning for Chinese Word Segmentation
- Chinese Segmentation Introduction
- 一个基于搜索的中文分词方法( A Search-based Chinese Word Segmentation Method)
- 优化SQL查询:如何写出高性能SQL语句
- Core Mappings in Action-Oriented Web Framework
- 请使用beanUitls框架操作bean的属性,然后会自定义转换器
- Smack类库详细介绍
- extjs4_treestore_s2sh整合,不容易啊,折腾2天
- 笔记-2003-Chinese Word Segmentation as LMR Tagging
- 关于_main 和main ,__rt_lib_init的讨论18573103324
- Android中打印代码的调用层次
- 开源日志:Linus Torvalds’s Lessons on Software Development Management
- secureCRT登陆虚拟机ubuntu
- 为不同的语言和硬件创建资源
- C++ 考试复习要点
- 小知识
- 《计算机语言C++》 windows下的库文件