基于正则化斯坦距离的神经算子变分推断用于深高斯过程我们引入神经操作变分推断(NOVI)用于深度高斯过程,使用神经生成器获得采样器,并通过最小化L2空间中生成分布和真实后验之间的正则化Stein差异解决挑战。我们使用Monte Carlo估计和子抽样随机优化技术求解极小极大问题。我们的实验证明,通过将Fisher差分乘以常数可以控制我们方法引入的偏差,从而实现鲁棒的误差控制,确保算法的稳定性和精确性。我们在从几百到数万的数据集上的实验表明了所提方法的有效性和更快的收敛速度。我们在CIFAR10数据集上实现了93.56%的分类准确性,超过了SOTA高斯过程方法。此外,我们的方法在DGP模型上理论上保证预测误差可控,并在各种数据集上展现出卓越性能。我们对NOVI能够提升深度贝叶斯非参数模型的性能并对各种实际应用产生重大影响持乐观态度。
Sep, 2023