特征调制变换器:通过高频先验交叉精炼全局表示用于图像超分辨率
用于遥感图像超分辨率 (RSISR) 的新型 Transformer 网络 SPIFFNet,通过引入跨空间像素整合和跨阶段特征融合注意力机制,有效提高了全局认知和特征表达能力,从而在定量度量和视觉质量上优于现有方法。
Jul, 2023
通过引入 Convolutional Transformer 层(ConvFormer)和基于 ConvFormer 的超分辨率网络(CFSR),提出了一种有效且高效的轻量级图像超分辨率任务解决方案,通过使用大卷积核卷积作为特征混合器替代自注意模块,实现了较长范围依赖关系和广泛接受域的建模,同时在计算成本稍微增加的情况下保留了更多高频信息,并且相对于现有的轻量级 SR 方法在计算成本和性能之间取得了先进的平衡。
Jan, 2024
本研究提出了一种基于 TransMRSR 的创新性两阶段脑 MRI 超分辨率方法,具有良好的细节保留和结构重建性能,其中 GAN 是提高高分辨率图像生成质量的关键模块之一。
Jun, 2023
本文介绍一种针对医学图像的局部特征缺失问题的方法,通过重新设计自注意力映射,利用小波变换对输入特征图进行分解,使用高频和低频子带表示粗粒度和细粒度特征,重构自注意力操作并加入高频部分的高斯金字塔,引入多尺度上下文增强块,实现医学图像的准确分割,并经过广泛实验证明了该方法的有效性。
Aug, 2023
通过使用 Fast Fourier Convolution 和 Residual Swin Transformer 改进的方法和新的 cross-attention 模块,我们提出了一种名为 SwinFSR 的 Stereo Image Super-Resolution 方法,并且实验结果表明了该方法的有效性和高效性。
Apr, 2023
本论文通过交替聚合局部全局特征,引入了位移卷积实现局部空间信息和通道信息的交互,并提出了块稀疏全局感知模块以进一步实现空间和通道信息的交互。同时,引入了多尺度自注意模块和低参数残差通道注意模块,实现了不同尺度上的信息聚合。在五个公开数据集上验证了提出的网络,在超分辨率方面超过了其他最先进的网络。
Dec, 2023
通过将图像分割为不重叠的图块、使用金字塔结构选择感兴趣的图块,并利用深度特征仅重构这些选定的图块,我们提出了一种新颖的基于变压器的算法 Selective Super-Resolution(SSR),解决了常规超分辨率方法在放大整个大图像时的巨大计算成本和在背景细化过程中引入额外或可能有害信息的两个缺点。实验证明,我们的方法在超分辨率方面具备效率和稳健性,在 BDD100K 数据集上与最先进的方法相比,FID 评分从 26.78 降低到 10.41,计算成本减少了 40%。源代码可在此 https URL 获得。
Dec, 2023
本文介绍了一种用于单张图像超分辨率重建的神经网络模型 FIWHN,通过将 WDIB 组成 FSWG、WCRW 和 WIRW 单元、WRDC 框架和 SCF 单元等方式,解决了模型复杂度高、中间特征丢失等问题,并引入了 Transformer,实现了 CNN 和 Transformer 的新型组合,结果表明 FIWHN 能够在性能和效率之间取得良好的平衡,更有利于下游任务解决低像素场景中的问题。
Dec, 2022
提出了一种名为 RFR-WWANet 的无监督可形变图像配准模型,使用了 RFRNet 和 WWA 设计以优化 Swin transformer,实现更精细的空间信息建模和语义关联,取得了明显的性能优势。
May, 2023
本文介绍了一种基于 Transformer 的方法,用于图像恢复,提出了一种名为 SwinFIR 的扩展方法,旨在提高捕捉全局信息的效率,同时改进了数据增强、预训练、特征集成等高级技术,使模型的性能得到显着提高,并在多个大型基准测试上取得了最先进的性能。
Aug, 2022