迁移学习与fine-tuning的区别
来源:互联网 发布:一个域名对应多个端口 编辑:程序博客网 时间:2024/05/29 12:17
迁移学习是一个idea,把一个预先训练好的模型的部分挪到一个类似的任务上使用。一方面这节省了训练的时间;另一方面对于某些任务我们可能有很大的dataset而对于另一些相似的任务并没有那么大的dataset,那么我们就可以拿在前者上训练好的模型抽掉最后几层(抽掉多少视后者有多大而定),在后者上只另外train最后几层。举个例子,在语音识别里我们有很多英语的数据,但却没有多少的葡萄牙语的数据,考虑到两者都深受拉丁语影响,我可以先拿英语的语音数据训练一个模型,在基于这个模型在葡萄牙语上训练模型的最后几层对最后几层参数进行微调。
fine-tuning 是一个trick,在迁移学习中有所涉及,但不仅仅出现在迁移学习中,指对参数进行微调。
0 0
- 迁移学习与fine-tuning的区别
- 迁移学习与fine-tuneing的区别
- 迁移学习和fine-tuning
- 使用matconvnet进行迁移学习(fine-tuning)的简单思路
- Caffe fine-tuning 学习
- 深度学习fine-tuning
- fine-tuning的二三事
- Pre-train 与 Fine-tuning
- keras系列︱迁移学习:利用InceptionV3进行fine-tuning及预测、完美案例(五)
- keras系列︱迁移学习:利用InceptionV3进行fine-tuning及预测、完美案例(五)
- fine-tuning
- 学习笔记: pycaffe example 之 fine-tuning
- CNN+caffe学习1:fine-tuning
- Fine-tuning 深度学习操作指南
- 【占坑】Pre-train 与 Fine-tuning
- caffe中fine-tuning的那些事
- fine-tuning 预训练的模型文件
- Tensorflow Fine-Tuning 的一些说明
- [Mapbox GL]在标签下方新增layer
- 剑指offer--斐波那契数列
- JRockit Mission Control
- 雾霾
- Android:include标签
- 迁移学习与fine-tuning的区别
- 将String输出到txt文件中,最简代码
- 002、自定义模块
- BeautifulSoup demo
- Spring IOC容器的两种基本形式
- pureftpd
- Rabbitmq学习之路4-Federation
- Android数据库更新解释
- Linux文件系统基础之inode和dentry