本文介绍了深度高斯过程模型,该模型可用于稀少数据的拟合,以及通过贝叶斯方法进行模型选择。
Nov, 2012
本研究研究了深度神经网络和高斯过程之间的联系,指出在广泛的条件下,随着体系结构越来越宽,隐含的随机函数在分布上会趋于高斯过程,并使用最大平均偏差评估收敛速率。最后,将贝叶斯深度网络与高斯过程进行比较,并从文献中回顾了非高斯替代模型。
Apr, 2018
本论文提出了基于卷积结构的深度高斯过程模型,是一种基于贝叶斯原则的图像分类方法,能够有效的利用局部特征,改善了传统的高斯过程方法在 MNIST 和 CIFAR-10 数据集上的分类准确性,尤其是 CIFAR-10 数据集上准确率提高了超过 10 个百分点。
Oct, 2018
本文介绍了一种基于双随机变分推断的方法,用于深度高斯过程模型(Deep Gaussian processes)的推断。该方法能够有效地处理数百个到十亿个数据点的分类和回归任务,验证了其推断模型的实用性。
May, 2017
通过研究 Deep Gaussian Processes 对应的非线性动态系统,分析了其学习能力随层数增加而显著降低的问题,提供了紧密的界限和动态系统的收敛速度,并将此发现证明实验结果。
Oct, 2020
本文提出使用随机变分推断基于随机特征扩展来训练 Deep Gaussian Process 模型的方法,该方法在多个数据集上均具有可扩展性和良好的性能,实现了量化不确定性的精确估计。
Oct, 2016
本文介绍了高斯过程和深度高斯过程,并探讨了用于近似贝叶斯推断的不同变分推断模型及其优点和局限性。
Sep, 2019
本文介绍了深度核过程的概念,探究了深度高斯过程、贝叶斯神经网络以及无限贝叶斯神经网络等模型与深度核过程的等价性,并提出了便于求解的深度逆 Wishart 过程,并通过 Gram 矩阵进行了基于感应点的变分推断,取得了优于标准全连接基线的性能表现。
本文研发了一种新的近似贝叶斯学习方案,使深高斯过程能够应用于中大规模回归问题,该方法通过近似期望传播程序和概率反向传播算法实现,对于 11 个现实世界数据集的非线性回归评估表明,它始终优于 GP 回归,几乎总是优于 Bayesian 神经网络的基于状态和采样的近似推理方法。
Feb, 2016
本研究使用随机梯度哈密尔顿蒙特卡洛方法对深层高斯过程模型的非高斯后验分布抽样,提供了一种新的推断方法,成为 Deep Gaussian Processes 领域新的最优模型。
Jun, 2018