深度学习(四十)优化求解系列(2)简单理解神经网络求解过程-未完待续

来源:互联网 发布:java课程设计选题 编辑:程序博客网 时间:2024/06/05 14:11

对于神经网络的求解过程BP,其实说白了就是复合函数的求导过程,所以我们需要先复习一下高数复合函数的求导过程。

一、复合函数的求导法则

1、复合函数:

此函数是一个包含了三层映射过程的复合函数,为了跟后面我们所要学习的神经网络优化求解相接轨,我们采用如下映射过程,来表示这样的一个复合函数(相当于一个四层的神经网络前向映射过程)

0 0
原创粉丝点击