ECCVNov, 2017

使用球形 CNN 学习 SO (3) 等变表示

PDF
TL;DR论文提出通过多值球面函数和在球谐域中实现球面上的准确卷积来解决 3D 卷积神经网络中的 3D 旋转等变性问题，进而提供了一种局部对称且通过平滑的频谱实现本地化滤波器的方法，同时还实现了一种用于谱域的新型池化技术，这些操作使得网络不需要过多的容量和数据增强即可在标准检索和分类基准测试中与现有的最先进性能相当。
发现论文，激发创造
  • 跨域 3D 等变图像嵌入

    本文介绍了一种基于球形卷积网络的 2D 图像嵌入学习方法，在不需要特定任务的监督下，利用其等变结构特征解决了姿态估计和新视角合成等应用。

    Dec, 2018

  • 自旋加权球面卷积神经网络

    介绍了一种新型球形卷积神经网络，使用自旋加权球形函数，实现在球形空间内的非均向滤波，适用于分类球形图像、3D 形状和球形全景图像的语义分割，并在实验中展现了优越性。

    Jun, 2020

  • 高效广义球形卷积神经网络

    提出了一种广义的球形卷积神经网络框架，其中包括了各种现有方法，并允许它们同时被利用。通过开发两个新的严格相等层，其复杂度已经被降至可行水平，使球形 CNNs 的更大、更具表现力模型能够被计算出来。通过这些发展，展示了对于球形基准问题，能够构建更具表现力的混合模型，达到最新的精度和参数效率。

    Oct, 2020

  • 扩展球形卷积网络

    这篇研究论文介绍了如何通过提出新的模型组件、实现核心操作以及应用特定输入表示等关键改进来扩展球面 CNN，使其可用于更大规模的问题并在 QM9 分子基准测试的多个目标上达到最新水平，在多个天气预测任务中实现竞争性表现。

    Jun, 2023

  • DeepSphere: 基于图的球形等变卷积神经网络

    通过将离散化球体建模为图形，我们可以容纳非均匀分布、部分和变化的采样。此外，图形卷积比球形卷积计算效率更高。通过使用 Defferrard 等人（2016）介绍的图形神经网络，我们讨论了如何实现旋转等变性，在旋转不变学习问题上表现良好。

    Apr, 2019

  • 3D Steerable CNNs：学习体数据中的等变特征

    本文提出了一种卷积网络，它对刚体运动具有等变性。使用 3D 欧几里得空间上的标量场、向量场和张量场来表示数据，并使用等变卷积在这些表示之间映射。实验结果验证了 3D Steerable CNN 对氨基酸倾向预测和蛋白质结构分类等问题的有效性，这些问题均具有 SE（3）对称性。

    Jul, 2018

  • 球面图像的等变性与增强对比

    本研究分析了卷积神经网络（CNN）在球形图像分类和语义分割中旋转等价性的角色，并以 MNIST 和 FashionMNIST 数据集为基础，比较了 S2CNNs 和标准非等变 CNNs 的性能与推理时间等因素的权衡考虑。研究发现，对于固有的旋转不变的任务，通过大幅增加数据扩增和网络规模，标准 CNNs 可以达到与等变网络至少同样的性能，而对于固有的等变任务，非等变网络始终无法达到等变网络的性能水平。

    Feb, 2022

  • 球面信号的卷积网络

    本文介绍了一种新的网络结构 —— 球面卷积网络，用于处理具有旋转不变性的分类问题，并通过在球面上进行卷积和旋转权重共享来实现旋转等变性。实验结果表明，球面卷积网络在处理类似于 MNIST 的数据集时具有很高的准确率。

    Sep, 2017

  • 用于高效和高性能医学图像处理的等变球面 CNN

    本研究探讨了等变网络在断层扫描成像应用中的重要性，通过解决卷积神经网络在医学成像系统后处理中的局限性，引入了一种能够减少对特定训练集依赖的等变网络，并验证了球面信号上球面卷积神经网络 (SCNNs) 在去噪和重建基准问题中的优越质量和计算效率，同时利用 SCNNs 作为传统图像重建工具的补充方法，提高成像结果质量并降低对训练集的依赖，本研究观察到 SCNNs 与 CNNs 相比，在保持相同或更高的图像处理质量的同时，显著降低了计算成本，并初步探索了其在更广泛断层扫描成像应用中的潜能，特别是那些需要全方位表示的应用。

    Jul, 2023

  • 球形卷积神经网络

    该研究介绍了构建球形 CNN 的基本模块，该模型可用于解决分子回归和全球气候建模等领域的问题，并通过实验证明了其计算效率、数值精度和有效性。

    Jan, 2018