关于Maxpooling层的求导

来源:互联网 发布:编程软件cimit怎么样 编辑:程序博客网 时间:2024/06/05 20:46

关于Maxpooling层的求导

用矩阵来简单描述maxpooling的过程:
例如 2*2的图片:[3521]
经过maxpooling后变为1*1的图片(去其中最大值的元素)[5]

在BP过程中求导描述的是当原来的图片的四个元素有轻微扰动, 对新的图片有怎样的影响, 所以5如果变为了5.1,会使得maxpooling以后的值变为5.1, 而其他元素的轻微扰动不会使得maxpooling层产生变化, 所以除了最大值5以外的位置求导应为0, 而最大元素的位置应为1(即x的导数为1).

其实maxpooling和relu的求导是一样的.