您现在的位置是:
首页
>
标签 “工程trick” 相关程序员文章站
工程Trick | 合并BN层加速前向推理
1.BatchNorm在训练深度网络模型时,BN(Batch Normalization)层能够加速网络收敛,并且能够控制过拟合,一般放在卷积层之后。如下示意图所示,BatchNorm是以通道为单位,对当前通道中所有的N、H、W做归一化。BN 层将特征归一化后,能够有效解决由于特征分布不均匀而导致的...
程序员文章站2022-07-15