本文提出了使用高斯过程模型来进行非参数回归,分类等任务,通过使用马尔科夫链方法对高斯过程的协方差函数的超参数进行采样,可以发现数据的高级特性并实现预测响应所需输入的相关性。
Jan, 1997
研究高斯过程回归中的收敛性,着重于层次高斯过程回归,在其中先验未知的高斯过程仿真器的均值和协方差结构中出现的超参数会从数据中学习,并与后验均值和协方差一起计算。提供收敛性分析,并通过连续函数的任何情况下的收敛性说明从数据中学习超参数不会影响高斯过程回归的收敛性,并且在广泛的场景中都得到保证。主要目标是利用高斯过程回归近似贝叶斯反问题的数据似然性,提供了在此背景下引入的误差界限。
Aug, 2019
通过将非一致性得分与高斯过程的后验标准差加权,提出了构建自适应交叉一致性预测区间的方法,这些预测区间具有类似于贝叶斯可信区间的适应性水平,并且在没有基础模型假设的情况下具有频率覆盖保证,可以用于评估高斯过程代理模型的质量,并帮助决策者选择最适合特定应用的最佳先验。
Jan, 2024
本文提出一种新的高斯过程模型,其随机部分与均值部分正交,以解决均值模型包含具有未知系数的多项式时出现的可识别性问题,并探讨其在多保真度模拟中的应用。
Nov, 2016
在短缺数据情况下,为贝叶斯机器学习模型提供适当的先验知识是主要挑战。最近元学习的进展提供了从相关任务中获得这些先验知识的强大方法。本文探索了高斯过程先验的平均函数元学习,提供了分析和经验证据表明均值函数的学习对于元学习是有用的,讨论了过拟合的风险,并与其他元学习方法进行了联系,如模型无关元学习和函数 PCA。
Jan, 2019
研究正定核的两种广泛使用的方法之间的差距,即贝叶斯学习或使用高斯过程进行推理和基于再生核希尔伯特空间的频率核方法,参考新旧结果和概念并比较算法数量和哲学理论差异。
Jul, 2018
本文利用高斯过程分布和连续性论证推导出一种新的弱假设下的统一误差界,分析了概率 Lipschitz 常数的演变和 Gaussian Process 模型控制未知动态系统的安全条件,且采用模拟程序验证了此方法的有效性。
Jun, 2019
研究估计协方差超参数的最大似然(ML)和交叉验证(CV)方法, 结果发现 CV 方法在协方差函数被错误指定时表现更好,但当模型被很好指定时,ML 更优。进一步将单参数情况扩展到了估计具有协方差函数的超参数的情况。
Jan, 2013
提出了一种基于高斯过程模型的非参数鲁棒贝叶斯滤波和平滑方法,用于非线性随机动态系统的系统识别和控制。在机器学习,机器人和控制领域,这种现代的 “系统识别” 方法比参数化函数表示更具鲁棒性。数值评估表明,所提出的方法在其他最先进的高斯滤波器和平滑器无法处理的情况下表现出鲁棒性。
Mar, 2012
本文探讨了对于 Bayesian 推断模型的输入扰动的鲁棒性估计问题,通过使用高斯过程理论并提出算法计算当前模型在输入空间中的紧密强度,并应用于两个例子中:一个 GP 回归问题和一个全连接深度神经网络来研究 MNIST 数据集上的对抗性例子。
Sep, 2018