平滑处理--拉普拉斯(Laplace Smoothing)
来源:互联网 发布:维弗网络 编辑:程序博客网 时间:2024/06/05 08:53
拉普拉斯平滑(Laplace Smoothing)又被称为加 1 平滑,是比较常用的平滑方法。平滑方法的存在时为了解决零概率问题。
背景:为什么要做平滑处理?
零概率问题,就是在计算实例的概率时,如果某个量x,在观察样本库(训练集)中没有出现过,会导致整个实例的概率结果是0。在文本分类的问题中,当一个词语没有在训练样本中出现,该词语调概率为0,使用连乘计算文本出现概率时也为0。这是不合理的,不能因为一个事件没有观察到就武断的认为该事件的概率是0。
拉普拉斯的理论支撑
为了解决零概率的问题,法国数学家拉普拉斯最早提出用加1的方法估计没有出现过的现象的概率,所以加法平滑也叫做拉普拉斯平滑。
假定训练样本很大时,每个分量x的计数加1造成的估计概率变化可以忽略不计,但可以方便有效的避免零概率问题。
应用举例
假设在文本分类中,有3个类,C1、C2、C3,在指定的训练样本中,某个词语K1,在各个类中观测计数分别为0,990,10,K1的概率为0,0.99,0.01,对这三个量使用拉普拉斯平滑的计算方法如下:
1/1003 = 0.001,991/1003=0.988,11/1003=0.011
在实际的使用中也经常使用加 lambda(1≥lambda≥0)来代替简单加1。如果对N个计数都加上lambda,这时分母也要记得加上N*lambda。
阅读全文
0 0
- 平滑处理--拉普拉斯(Laplace Smoothing)
- 拉普拉斯平滑处理 Laplace Smoothing
- 拉普拉斯平滑处理 Laplace Smoothing
- 拉普拉斯平滑处理 Laplace Smoothing
- Naive Bayes与Laplace smoothing 朴素贝叶斯算法拉普拉斯平滑
- Laplace(拉普拉斯)平滑
- 神奇的拉普拉斯平滑(Laplacian Smoothing)及其在正则化上的应用~
- 神奇的拉普拉斯平滑(Laplacian Smoothing)及其在正则化上的应用~
- 平滑(smoothing)
- 高斯拉普拉斯(Laplace of Gaussian)
- Laplace 平滑
- 斯坦福第五章:拉普拉斯平滑处理
- 基于Eigen库的离散拉普拉斯平滑(Discretized Laplacian Smoothing)的C++非稀疏矩阵实现
- 拉普拉斯平滑
- 拉普拉斯平滑
- Laplace translation 拉普拉斯变换
- Laplace distribution (拉普拉斯分布)
- OpenCV&图像处理_2:平滑smoothing模糊blurring操作
- GAN之根据文本描述生成图像
- Shell装换时间格式为时间戳
- 万树IT:Java的面向对象
- C#项目,改变文件的输出路径,查看C#项目的版本号,修改版本号的规则
- 登录mysql终端查看连接进程
- 平滑处理--拉普拉斯(Laplace Smoothing)
- 微软概念产品Magic Radio荣获2017年红点设计奖
- 数学学习的心理——关于数学中的挫败的反思及若干启示
- Spring Boot 配置文件加载顺序
- bzoj2342 双倍回文【manacher+set】
- jQuery prop全选
- 魔性十足的数学动态图,这种东西都拿出来分享?
- Spark安装和启动
- Java踩坑历程