WaveMix:一种用于图像分析的资源高效神经网络
WaveMix 是一种采用多尺度 2D 离散小波变换 (DWT) 进行空间令牌混合的替代神经架构,与卷积神经网络 (CNNs) 和 ViTs 相比,在多个数据集上表现出了与它们相当甚至更好的泛化性同时需要更少的计算和存储
Mar, 2022
提出了一种新的神经网络,基于 WaveMix 架构,用于图像超分辨率,不同于基于 transformer 的模型,WaveMixSR 使用离散小波变换进行空间令牌混合,可以在更少的资源和训练数据的情况下实现更高的性能,同时保持较高的参数效率。
Jul, 2023
本文介绍了一种基于 WaveMix 的全卷积神经网络结构 WavePaint 用于图像修复,采用 2D 离散小波变换进行空间和多分辨率的令牌混合,与目前最先进的模型相比,WavePaint 模型参数更少,具有相当的泛化性。
Jul, 2023
该论文提出了一种基于 CNN 编码器 - 解码器结构的 WCNN,并在城市景观数据集上进行了实验,结果表明它能够有效地进行高分辨率密集像素预测并提高准确性。
Aug, 2018
该论文提出了一种将小波变换与 CNN 融合的方法,通过 DWT/IDWT 层将特征图分成低频和高频两部分来提高 CNN 对噪声和对抗性攻击的鲁棒性,并在 COCO 检测数据集上不断提高 object detectors 性能的实验结果表明,该方法可以有效提升 CNN 的训练速度和精度。
Jul, 2021
本文提出了一种多级小波卷积神经网络 (MWCNN) 模型,通过将小波变换嵌入到 CNN 体系结构中,以在减少特征映射分辨率和增加感受野之间实现更好的权衡,以实现图像去噪、单图像超分辨率、JPEG 图像伪影去除和物体分类等任务的有效性。
Jul, 2019
本文研究如何通过离散小波变换(DWT)代替传统的 max-pooling,strided-convolution 和 average-pooling 来提高卷积神经网络(CNN)的抗噪性能,并设计了 WaveCNets 来进行图像分类,实验证明 WaveCNets 相比于 VGG,ResNets 和 DenseNet 等传统版本具有更好的噪声鲁棒性和准确性。
May, 2020
本文提出了 MultiWave 框架,采用小波分解对多变量时间序列数据进行频率分组,并结合门控机制来提高各种深度学习模型的性能。多个实验表明,MultiWave 可以准确地识别信息丰富的频率带,提高模型性能,并提供有价值的应用见解。
Jun, 2023
本文介绍了一种基于小波变换的多分辨率感知器神经网络结构,该结构通过添加池层,创建了一个新的网络单元 WavPool,将尺度和空间信息同时提供给网络,相对于类似的多层感知器和卷积神经网络具有更高的相对准确性。
Jun, 2023