May, 2022

通用深度图神经网络:从路径分解的角度重新思考图神经网络中的残差连接以防止过度平滑

TL;DR本论文从路径分解的角度研究 GNNs 中残差连接的前向和后向传播行为,发现由残差连接路径的二项式分布递归聚合的中位数长度路径控制输出表示,导致 GNNs 深度加深时的过度平滑。基于这些发现,作者提出了一种带有冷启动自适应残差连接和前馈模块的通用深度 GNNs 框架(UDGNN-DRIVE),并进行了大量实验表明其有效性,可通过简单堆叠标准 GNNs 实现非平滑异构数据集上的最新结果。