BriefGPT.xyz
Ask
alpha
关键词
sufficient batch size
搜索结果 - 1
ICLR
在 BN 反向传播中稳定批统计量
本文提出一种新的归一化方法,即移动平均批量归一化(MABN),可以在小批量情况下完全恢复基本 BN 的性能,并且在推理过程中不需要引入任何额外的非线性操作,此方法通过理论分析和实验演示了其有效性。
PDF
4 years ago
Prev
Next