隐马尔可夫模型与词性标注(上)
来源:互联网 发布:淘宝店铺美工多少钱 编辑:程序博客网 时间:2024/04/19 09:41
1. 隐马尔科夫模型(Hidden Markov Models,HMM)
关于隐马尔科夫模型,在我爱自然语言处理上有一个很生动形象的解释:http://www.52nlp.cn/hmm-learn-best-practices-two-generating-patterns
至少要知道以下几点:
(1)HMM是一个数学模型,包括隐藏状态集合、观察状态集合、观察状态的初始概率向量π, 隐藏状态间的转移矩阵A,隐藏状态转换为观察状态的混淆矩阵B,B又叫做发射矩阵,隐藏状态转换为观察状态成为发射状态。
(2)HMM由π,A,B三个参数可以确定,HMM(π,A,B)。
(3)HMM可以用来解决三个问题:
a. 给定一个模型,如何计算某个特定的观测序列的概率;
b. 给定一个模型和某个特定的观测序列,如何找到最可能产生这个输出的隐藏状态序列;
c. 给定足够的观测数据,如何估计HMM的三个参数 。
(4)语音识别主要关注第一和第三个问题,词性标注主要关注第二和第三个问题。
(5)a 可以通过前向算法快速解决,b 需要利用Viterbi算法解决,c 有两种方法解决:有监督或者无监督方法训练参数。有监督的参数训练通过标注训练集统计获得相关参数,难度较低;无监督的参数训练则通过鲍姆-韦尔奇算法迭代训练获得,难度很大。
2.
0 0
- 隐马尔可夫模型与词性标注(上)
- 隐马尔可夫模型与词性标注(下)
- 词性标注(1)
- 基于隐马尔可夫模型的有监督词性标注
- 基于隐马尔可夫模型的有监督词性标注
- 基于隐马尔可夫模型的有监督词性标注
- 基于隐马尔可夫模型的有监督词性标注
- 中文分词与词性标注
- LTP分词与词性标注(使用用户词典)
- 转载 基于HMM模型的词性标注
- HMM模型用在词性标注、分词
- 词性标注(POS tagging)
- 词性标注
- 词性标注
- 词性标注
- 词性标注
- 词性标注
- 中文词性标注与viterbi算法
- 后台代码
- Linux命令汇总
- 使用JavaMail创建邮件和发送邮件
- 51nod 1405 树的距离之和【树形dp】
- https://www.zhihu.com/question/25427490/answer/30834017
- 隐马尔可夫模型与词性标注(上)
- CentOS7 从零开始搭建 Hadoop2.7集群
- 欢迎使用CSDN-markdown编辑器
- Java Web UI框架
- 2017.3.1 xiaoyimi测试
- zip 伪加密 Python处理脚本
- 网络流—最大流算法
- linux例行性工作调度
- GPL协议的基本内容和GNU计划