EM算法的一些感想
来源:互联网 发布:10年总决赛第七场数据 编辑:程序博客网 时间:2024/06/07 06:03
EM算法是最大似然估计方法--参数估计方法的一种 为什么要引入EM呢 我觉得 因为参数theta本身是依赖于数据的完整特征 但是只观察了部分特征X 因此需要引入隐藏特征Z 才能建立起theta与X,Z的关系。。。
怎么开始这个过程呢?我们现在自己的脑袋里假设存在一个theta(当然我们未知) 利用这个theta对数据进行了采样 由于每个数据的X特征已知 只须采样每个样本的Z特征 (这是一次实验) 利用实验观察的数据(X,Z)来修正我们对theta的理解,即使最大化似然函数的theta值作为新值;然后利用新的theta来做下一次实验 再利用新的数据修正我们对当前theta的理解 。不断重复上述过程 直到现实的观察与我们对世界的理解基本吻合 就停止实验。
至于EM算法为什么容易陷入局部最优解 要采取多次随机初始化呢?我认为 每个人对世界的认识都有限 只能根据自己的经验去判断 与外界缺乏联系 因此 只能做到自己认为的最好
怎么开始这个过程呢?我们现在自己的脑袋里假设存在一个theta(当然我们未知) 利用这个theta对数据进行了采样 由于每个数据的X特征已知 只须采样每个样本的Z特征 (这是一次实验) 利用实验观察的数据(X,Z)来修正我们对theta的理解,即使最大化似然函数的theta值作为新值;然后利用新的theta来做下一次实验 再利用新的数据修正我们对当前theta的理解 。不断重复上述过程 直到现实的观察与我们对世界的理解基本吻合 就停止实验。
至于EM算法为什么容易陷入局部最优解 要采取多次随机初始化呢?我认为 每个人对世界的认识都有限 只能根据自己的经验去判断 与外界缺乏联系 因此 只能做到自己认为的最好
0 0
- EM算法的一些感想
- EM算法的一些整理
- em算法的一些理解
- 关于EM算法的一些心得感悟
- 实现搜索算法的一些感想~~
- 对优化算法的一些感想
- 关于算法与数据结构的一些感想
- 我的一些感想
- 年末的一些感想
- 最近的一些感想
- 寫線程的一些感想
- “开放”的一些感想
- DWR的一些感想
- 系统分析的一些感想!
- Coding的一些感想
- GBUZZ的一些感想...
- 最近的一些感想
- seekbar的一些感想
- mac下pycharm python 默认生成“# coding=utf-8”等内容的方法
- 如何将Eclipse中的项目迁移到Android Studio 中
- 一次非常有意思的 SQL 优化经历
- JS面向对象2(继承)
- 解决sikuli打不开的问题
- EM算法的一些感想
- C#跨窗体控制
- [leetcode][bit] Single Number
- 1016. Phone Bills (25)
- 笔记---listview嵌套viewpager问题
- C++内存管理
- 绝对有效的 mircsoft visio 2010激活码
- 警惕url跳转到钓鱼网站--淘宝二手经历
- 《产品经理必知必会》读书笔记