Feb, 2021
贝叶斯神经网络的结构化随机失活变分推断
Structured Dropout Variational Inference for Bayesian Neural Networks
Son Nguyen, Duong Nguyen, Khai Nguyen, Khoat Than, Hung Bui...
TL;DR提出一种新颖的变分结构近似方法 (VSD),它通过引入正交变换来学习可信复杂度的变分高斯噪声上的结构表示,并在近似后验中引入统计依赖性来解决 Variational Dropout 方法的问题,从而提高了先前 Variational dropout 方法的拟合精度和更好的泛化性能。