使用语义指导的交互式图像修复
该论文介绍了一种用于图像修复的新型深度神经网络,该网络包含了一个修复分支和两个辅助分支,能够有效地利用多模式定位和语义信息,实现对各种正 / 不规则图像遮挡的修复,达到了最好的效果。
Aug, 2022
本文提出一种名为 TDANet 的图像修复模型,其通过文本的描述信息和图像的辅助区域来确定修复区的语义内容,利用双模态注意机制提取出明确的语义信息并应用图像与文本匹配损失,其结果表明,在两个公开数据集上,TDANet 模型在定量和定性评测中均达到了新的最佳水平,并且生成的图像与文本描述一致。
Apr, 2020
本研究提出了一种基于语义引导和评估网络的图像修复算法,该算法在每个缩放级别利用语义分割图指导图像修复过程,并利用迭代更新方法实现结构先验和图像修复的协同更新,实验结果表明该方法在图像纹理清晰度和真实感等方面具有优越性。
Mar, 2020
本文提出了一种基于端到端网络的图像修复方法,使用不同的图像来引导合成新的内容并填充空洞,并在四项研究中展示了优于七种基线方法的更逼真的图像修复结果。
Mar, 2018
通过提出的两个新损失函数:音频 - 视觉关注损失和音频 - 视觉伪类一致性损失,我们向视频修复网络传递音频 - 视觉对应关系的先验知识,进而提高视频修复的性能。实验证明,我们的方法可以更好地恢复更广泛的视频场景,并且在场景中的声音对象局部遮挡时特别有效。
Oct, 2023
本文提出使用受自我监督预训练的 MAE 方法,作为 inpainting 模型的新骨架,并加入 MAE 注意先验,以增强 inpainting 模型的长距离依赖性,验证结果显示该方法在 Places2 和 FFHQ 上都取得了较好的效果。
Aug, 2022
提出了一种使用新型的连贯的语义注意力(CSA)层和深度生成模型的方法来进行图像修复的深度学习方法,能够更好地模拟孔特征之间的语义相关性,经过在多个数据集上的验证,该方法在图像修复领域取得了优异的成果。
May, 2019
本文提出了一种利用扩张卷积密集组合,通过设计自主回归损失、几何对齐约束项和具有局部和全局分支的判别器等方法改进图像修复的 GAN 模型。实验表明,该方法在多个公共数据集上都优于现有的最先进方法。
Feb, 2020