BriefGPT.xyz
Ask
alpha
关键词
data-heterogeneity
搜索结果 - 1
IJCAI
异构集成知识迁移用于联邦学习中的大模型训练
本研究提出了一种新的合奏知识转移方法 Fed-ET,采用了加权一致性蒸馏方案,通过利用各服务器的高度异构数据来提取可靠的共识,同时通过利用合奏中的多样性来改善泛化能力,并在图像和语言任务中显示出在通信参数较少的情况下,Fed-ET 明显优于
→
PDF
2 years ago
Prev
Next