[机器学习入门] 李宏毅机器学习笔记-8(Backpropagation;反向传播算法)

来源:互联网 发布:php数组是什么数据结构 编辑:程序博客网 时间:2024/05/22 00:18

[机器学习入门] 李宏毅机器学习笔记-8(Backpropagation;反向传播算法)

PDF VIDEO

当我们要用gradient descent来train一个neural network,要怎么做?

Gradient Descent

这里写图片描述

backpropagation就是Gradient Descent。


Chain Rule(连锁法)

这里写图片描述

Backpropagation主要用到了Chain Rule


Backpropagation

这里写图片描述

这里写图片描述


Forward pass

这里写图片描述

这里写图片描述


Backward pass

这里写图片描述

这里写图片描述

这里写图片描述

这里写图片描述

这里写图片描述

这里写图片描述


Summary

这里写图片描述

阅读全文
2 0
原创粉丝点击