Mar, 2024

使用可解释的人工智能根本原因分析预测异常

TL;DR该论文介绍了可解释人工智能在连续学习用户参与数据的机器学习模型中追溯性能退化的新应用。我们成功地将这种技术应用于提高个性化广告模型的可靠性。这种系统中的性能退化表现为模型中的预测异常。我们演示了全局特征重要性分布的时间漂移如何有效地隔离预测异常的原因,具有比模型对特征相关性方法更好的召回率。该技术似乎在使用简单的扰动方法来近似局部特征重要性并在几千个示例上聚合时也是有效的。我们发现这种技术是一种与模型无关、成本低廉且有效监控生产中复杂数据流水线的方法,并已部署了用于连续分析连续训练模型的全局特征重要性分布的系统。