Apr, 2024

效用公平交替及其搜索方法

TL;DR在构建考虑人口统计公平性的分类系统时,需要满足两个目标:一是在特定任务中最大化效用,二是确保对已知人口统计属性的公平性。然而,这两个目标往往存在竞争,因此在优化两者时可能需要权衡。本文回答了两个问题:一是效用和公平之间的最佳权衡是什么?二是如何从数据中量化这些权衡以用于所需的预测任务和人口统计属性?我们引入了两种效用 - 公平权衡:数据空间权衡和标签空间权衡,并揭示了在效用 - 公平平面上的三个区域,界定了完全可能、部分可能和不可能的情况。基于这些权衡,我们提出了一种用于根据数据样本从量化预测任务和群体公平性定义的权衡的方法 U-FaTE。对超过 1000 个预训练模型中的公平表示方法和表示进行了广泛评估,结果显示大多数当前方法在多个数据集和预测任务上与估算和可实现的公平 - 效用权衡相距甚远。