Apr, 2024

非独立同分布数据隐私灵活联合学习的近似梯度编码

TL;DR该研究针对非独立同分布数据和联邦学习中的慢节点 / 失联节点的挑战进行了探讨,提出了一种灵活的隐私范式,将部分客户端的本地数据建模为非私有数据,从而在隐私方面提供了更多样化且以企业为导向的视角。同时,该研究通过结合离线数据共享和近似梯度编码技术,提出了一种基于数据驱动的策略,用于减轻标签异质性和客户端慢速运行对联邦学习的影响。通过使用 MNIST 数据集进行数值模拟,我们证明了我们的方法能够实现隐私和效用之间的有意义的权衡,从而改善模型的收敛性和准确性,并且可以利用一部分非私有数据。