R-MNet: 用于图像修复的知觉对抗网络
本文提出了一种基于生成对抗网络(GAN)框架的图像修复方法,该方法利用全局GAN(G-GAN)架构和PatchGAN方法结合进行鉴别器网络的构建,可较好地实现图像贴图的局部连续性和全局特征。经大量评估发现,与最新的现有技术相比,该框架在视觉和数量评估方面均取得了显著的改进。
Mar, 2018
本文提出了一种建基于门控卷积的生成式图像修复系统,用于完成自由形状掩码和引导的图片修复任务。所提出的门控卷积解决了通用卷积中将所有输入像素视为有效像素的问题,并提供了一种可学习的动态特征选择机制,以适应于每个通道和空间位置上的输入。作者还提出了一种名为 SN-PatchGAN 的基于图像块的 GAN 损失,可以应用于自由形状掩码和根据用户指导进行图像扩展,并证明所提出的方法比以往任何方法都更加高质量和灵活性。
Jun, 2018
本文提出了一种利用扩张卷积密集组合,通过设计自主回归损失、几何对齐约束项和具有局部和全局分支的判别器等方法改进图像修复的 GAN 模型。实验表明,该方法在多个公共数据集上都优于现有的最先进方法。
Feb, 2020
本研究提出了一种基于生成式对抗网络的图像拓展方法,通过对多个潜在编码的生成进行条件渲染,实现了对图像的多样化拓展,并可对分类输入进行拓展,其拓展区域结构和内容更加丰富,表现出更高的视觉质量和多样性。
Apr, 2021
本文提出了一种新的用于图像修复的GAN反演模型InvertFill,它包括一个带有预调制模块的编码器和一个包含F&W+潜在空间的GAN生成器。通过使用F&W+潜在空间和Soft-update Mean Latent模块,该模型能够更好地实现图像修复。该模型在四个具有挑战性的数据集上的综合实验结果表明,在视觉和定量上优于现有的高级方法,并且很好地支持跨域图像的修复。
Aug, 2022
提出了一种使用CNN和Transformers进行全局推理的few-shot generative residual image inpainting方法,通过图像级和补丁级鉴别器及伪造补丁的对抗训练策略实现高质量修复效果,并通过对比评估表明该方法优于以往的few-shot image inpainting方法。
Apr, 2023
利用样式生成对抗网络(StyleGAN)的潜在空间,将真实图像反转并通过语义丰富的特征表示进行多项编辑,进一步扩展到将被擦除的图像反转到GAN的潜在空间中进行逼真修复和编辑的更为困难的任务,通过将反转的潜在编码与随机样本的 StyleGAN 映射特征组合,通过训练编码器和混合网络,利用生成的数据来鼓励混合网络同时利用两个输入,并利用高速特征来防止修复部分与未被擦除部分的颜色不一致,并通过与先进的反转和修复方法进行实验和对比,定量指标和视觉比较显示出显著的改进。
Jul, 2023
本文提出了一种基于DDPM的模型,能够通过使用生成对抗网络(GAN)的生成器来建模反向扩散过程,从而以较低的采样成本填充丢失的像素,实验结果表明我们的方法在通用图像修复数据集上表现出卓越性能。
Aug, 2023