Jun, 2024

通信高效的联邦知识图嵌入与实体智能 Top-K 稀疏化

TL;DRFKGE 挑战主要集中在参数的规模和通信轮次的通信效率上,现有方法主要关注减少通信轮次,但忽视了每次通信中传输的参数规模,因此本文提出了一种双向通信高效的 FedS 方法,利用实体级的 Top-K 稀疏化策略来减少通信量和维护嵌入精度,通过上传和下载阶段的动态选择和传输 Top-K 实体嵌入,以及 FedS 的间歇同步机制来解决异构 FKG 导致的嵌入不一致问题,并通过实验证明了 FedS 显著提高了通信效率,且性能损失可以忽略不计。