caffe的LRN层粗解

  caffe中有一个LRN 层，全称为Local Response Normalization,即局部响应归一化层。

  该层参数有：

  normal_region：选择对相邻通道间归一化还是对通道内的空间区域归一化，默认为ACROSS_CHANNELS,

即通道间归一化；

  local_size:两种表示，（1）：通道间归一化是表示求和的通道数；（2）：通道内归一化示表示归一化操作的

区间的边长；local_size的默认值为5；

  alpha:缩放因子，默认值为1；

  beta:指数项，默认值为5；

  局部响应归一化层完成一种“临近抑制”操作，对局部输入区域归一化。

  在通道间归一化模式中，局部区域范围在相邻通道间，但没有空间上的扩张（即尺寸为local_sizeX1X1);

  在通道内归一化模式中，局部区域范围在当前通道内,有空间上的扩张（即1XlocalXloacl);

  对输入值都将除以;其中n为局部尺寸大小：local_size;alpha和beta前面已经经定义。

求和将在当前处于中间的位置的局部区域内进行（如有必要将进行补零）；