Jul, 2018

SYQ:学习对称量化以实现高效的深度神经网络

TL;DR本文介绍了一种量化方法——通过学习特定权重子组的对称码本,来减少权重亚群在前向传播和反向传播中的梯度误差,从而提高超低精度权重和激活的网络的准确性,并证明此表示对更粗粒度的方法没有或仅有最小的硬件影响。该方法可用于神经网络量化。