May, 2023
分布式随机优化中的下限与通信压缩加速算法
Lower Bounds and Accelerated Algorithms in Distributed Stochastic Optimization with Communication Compression
Yutong He, Xinmeng Huang, Yiming Chen, Wotao Yin, Kun Yuan
TL;DR本文研究了利用通信压缩的分布式随机优化算法的性能上限,并提出了 NEOLITHIC 算法,该算法在温和条件下实现所建立的理论下限。