Apr, 2021
DistGNN:大规模图神经网络的可扩展分布式训练
DistGNN: Scalable Distributed Training for Large-Scale Graph Neural Networks
Vasimuddin Md, Sanchit Misra, Guixiang Ma, Ramanarayan Mohanty, Evangelos Georganas...
TL;DR该论文介绍 DistGNN,它使用共享内存实现 CPU 集群上的完全批量训练,减小了通过最小顶点切割图分区算法通信的要求,使用一系列延迟更新算法避免了通信,并在 Reddit、OGB-Products、OGB-Papers 和 Proteins 等常见 GNN 基准数据集上获得了 3.7 倍到 97 倍的加速。