小知识 | 机器学习:不得不知的概念(2)
来源:互联网 发布:sqlserver management 编辑:程序博客网 时间:2024/04/27 17:05
本文通过一个例子说明什么是机器学习的泛化能力,理解它有助于你了解机器学习为什么要解决过拟合问题。
泛化能力
泛化能力(generalization),学得的模型适用于新样本的能力,是非常重要的能力。
举个例子来说明什么是泛化能力。
就在我们上学那回,小明爱动脑筋,老师讲的题目不光会做,还能举一反三;小红学习很努力,上课认真听讲,老师布置的作业完成的非常好,但是这仅限于老师讲过的知识范畴内,因为小红不喜欢动脑筋,就是填鸭时地学习知识,老师讲什么,她就学什么,并且这些学得非常好。
在一次数学竞赛中,考的题目都不是以前做过的题目,更别说有原题了,考试的结果,小明100,小红30。
我们说小明的泛化能力很强,因为它能根据老师讲的东西,准确回答出以前老是讲过地类似题目,毕竟万变不离其宗,形式再不一样的题目还是围绕那30个知识点。
但是,小红泛化能力很弱,它虽然平时老师讲的那些题目都会做,但过度地依赖老师讲的每一个细节,仅限于老师讲的那些东西,当来了一个形式上变化但是原理不变的题目时,她变得束手无策,答错了很多题。
引起泛化能力不足的一个原因是过拟合,过拟合导致在测试集上变现非常好,但是在新来的数据集上表现非常差。
泛化能力图解
泛化能力差
过拟合,导致了泛化能力差;
泛化能力好
相对于左图,此拟合的泛化能力好
转自:算法channel
阅读伙伴公众号更多精彩内容,点击 “ 阅读原文 ”
阅读全文
0 0
- 小知识 | 机器学习:不得不知的概念(2)
- 小知识 | 机器学习:不得不知的概念(1)
- 小知识 | 机器学习:不得不知的概念(3)
- 「机器学习」:不得不知的概念(2)
- 机器学习:不得不知的概念(1)
- 「机器学习」:不得不知的概念(3)
- 「机器学习」:不得不知的概念(3)
- 关于人工智能,不得不知的小知识
- iOS开发系列--Swift 3.0不得不知的小知识
- 不得不知的小常识
- 闪存浪潮下不得不知的知识(2)-颗粒篇
- Android初级不得不知的知识
- 机器学习算法中不得不知的欠拟合与过拟合问题
- 闪存浪潮下不得不知的知识(1)-厂商篇
- 闪存浪潮下不得不知的知识(3)-技术篇
- 闪存浪潮下不得不知的知识(4)-接口篇
- 数字图像处理不得不知的点(2)
- 46个不得不知的生活小常识
- 【C#编程最佳实践 八】MVC流程实践
- centos 7忘记mysql的密码是解决办法
- 时间各种格式转化
- Week 8算法分析作业
- java通过jni native method 调用非java语言的代码,例:c++
- 小知识 | 机器学习:不得不知的概念(2)
- 期末课程设计||通讯录系统
- 每天一个linux命令(33):df 命令
- springboot学习笔记(四)使用querydsl完成条件查询
- 动态加载脚本和样式
- 过山洞
- 寻找zcmu-2017浙江中医药大学程序设计
- Spark standalone模式结合虚拟机遇到的问题
- 大疆技术总监:如何用六年成为一个全能的机器人工程师