合规化选择回归
该研究提出了一种利用模型非参数不确定性估计的选择性回归方法,通过全面的基准测试在 69 个数据集上展示了该框架优于现有选择性回归方法的性能,并使用可解释的人工智能技术对选择性回归的动因进行了理解。
Nov, 2023
针对误差关键的机器学习应用中存在的可能放弃预测(或选择性预测)的问题,本研究在非参数异方差回归问题上提出了一种通过对给定点上的条件方差值进行假设检验的放弃过程。与已有方法不同,提出的方法不仅考虑方差本身的值,还考虑相应方差预测器的不确定性。我们对得出的估计器的风险证明了非渐进界限,并展示了多个不同的收敛模式。理论分析通过一系列的模拟和真实世界数据实验进行了说明。
Sep, 2023
本文介绍了一种新的预测方法,将 Conformal prediction 和经典的 quantile regression 相结合,使其完全适应异方差性,并且能够在不做分布假设的情况下,建立具有有效覆盖率的预测区间,相比其他 conformal 方法,本文提出的方法具有更高的效率和更短的预测区间。
May, 2019
探究贝叶斯岭回归在满足标准贝叶斯假设的情况下,与等效算法相比,异步共形预测集有效性的要求是否被满足。结果显示,在这种情况下,渐近共形预测集与岭回归预测区间的差异很小。
Apr, 2014
本文研究了分类模型的选择性分类方法,发现在存在虚假相关性时,选择性分类可以提高平均准确度,但会放大不同群体之间的准确度差异。我们的分析表明,对于对称边缘分布,选择性分类是通过完全覆盖(即没有犹豫)下的准确度和分布是否满足左对数凹性质来确定改善或恶化准确度。基于我们的分析,我们训练了分布稳健模型,并表明选择性分类可以在这些模型上统一改进每个群体的准确性。
Oct, 2020
通过引入选择性集合来减轻模型的不一致性,使用随机选定的起始条件训练一组模型的预测上执行假设检验;在这些情况下,选择性集合可以放弃不一致预测结果并在指定的置信水平下达成一致结果,多个基准数据集上展示出零一致性预测点和低至 1.5%的放弃率。
Nov, 2021
通过对包含图像和表格数据的多样化数据集进行实证评估,该研究对 18 种基线模型进行基准测试,比较了它们在选择错误率、实证覆盖率、被拒绝实例类别分布以及在分布外实例上的性能等多个方面的表现,结果显示没有一个明确的最佳方法,最好的方法取决于用户的目标。
Jan, 2024