Sep, 2019
关于贝叶斯神经网络中近似推断表现的探讨
On the Expressiveness of Approximate Inference in Bayesian Neural Networks
Andrew Y. K. Foong, David R. Burt, Yingzhen Li, Richard E. Turner
TL;DR通过研究两种常见的变分方法,该文证明了在低不确定性区域之间不存在过多信息增加的情况,并提供了深度神经网络中的柔性不确定性估计的近似贝叶斯后验分布,但发现了类似于单隐层 ReLU 情况的病理现象。