caffe的LRN层粗解

caffe中有一个LRN 层，全称为Local Response Normalization,即局部响应归一化层。

该层参数有：

normal_region：选择对相邻通道间归一化还是对通道内的空间区域归一化，默认为ACROSS_CHANNELS,

即通道间归一化；

local_size:两种表示，（1）：通道间归一化是表示求和的通道数；（2）：通道内归一化示表示归一化操作的

区间的边长；local_size的默认值为5；

alpha:缩放因子，默认值为1；

beta:指数项，默认值为5；

局部响应归一化层完成一种“临近抑制”操作，对局部输入区域归一化。

在通道间归一化模式中，局部区域范围在相邻通道间，但没有空间上的扩张（即尺寸为local_sizeX1X1);

在通道内归一化模式中，局部区域范围在当前通道内,有空间上的扩张（即1XlocalXloacl);

对输入值都将除以

;其中n为局部尺寸大小：local_size;alpha和beta前面已经经定义。

求和将在当前处于中间的位置的局部区域内进行（如有必要将进行补零）；