Jun, 2021

镜像Stein算子采样

TL;DR本研究介绍了一种新的粒子演化采样器,适用于约束域和非欧几里德几何。使用 Stein Variational Mirror Descent 和 Mirrored Stein Variational Gradient Descent 定义一个镜像映射,在双重空间中演化粒子,通过最小化 KL 散度到约束目标分布。 Stein Variational Natural Gradient 利用非欧几里德几何更高效地最小化 KL 散度到无约束目标。通过引入首次开发的一类镜像 Stein 算子和自适应内核来推导这些采样器。证明了这些新的采样器在单纯形上可以精确地逼近分布,在后选择推断中提供有效的置信区间,并且在大规模无约束后验推断中比以前的方法更快地收敛。最后,在目标分布上的可验证条件下,我们建立了我们的新程序的收敛性。