该研究提出了一种新型的 PromptRR 框架,使用频率信息作为视觉提示来改进去除反射的效果,并利用特殊生成的提示集成到 PromptFormer 网络中,采用基于 Transformer 的提示块来有效引导模型进行增强反射去除。结果表明,该方法优于现有的方法。
Feb, 2024
该研究提出了一种全方位图像恢复方法,通过从频率角度出发,利用先进的视觉变换器来处理多种类型的退化,以提取图像的退化表示并引导模型适应性地恢复退化的图像。实验证明,该方法在去噪、去雨、去雾和去模糊等四个典型恢复任务中优于现有方法,并且能够处理空间变异的退化和未知退化水平。
Jun, 2024
基于 Prompt-In-Prompt 学习的图像修复模块(PIP)可以通过高效、易用的方式提升现有的图像修复模型,在图像去噪、去雨、去雾、去模糊和低光增强等多个任务上展现出卓越性能,且具备可解释性、灵活性和潜在的真实世界应用潜力。
Dec, 2023
本研究提出了一种有效的基于文本提示的图像修复模型,通过任务特定的 BERT 进行精确理解用户指令并生成文本提示,设计了深度多头转置注意力和门控卷积模块来弥合文本提示和视觉特征之间的差距,创新地将语义提示引入到低层视觉域中,实验证明该模型在公共去噪、去雾和去雨数据集上获得了显著优越的性能,能够准确识别和去除图像的退化,无需增加模型的复杂性。
本文提出了一种利用降噪、去模糊等各种图像退化类型的可控视觉提示符来实现图像恢复的通用模型 ProRes,该模型可以简单调节以适应新任务,并且在控制和自适应性能方面比特定任务的方法更具竞争力。
Jun, 2023
本研究提出了一种基于数据要素导向的方法,通过利用基于提示的学习来实现单模型高效处理多种图像退化任务,结合卷积神经网络和 Transformer 模块的属性对高质量图像修复进行建模,并引入特征融合机制来改善聚合特征,所得到的 CAPTNet 架构能够处理不同类型的退化情况,在大量实验证明与专门的算法相比具有竞争性的表现。
Sep, 2023
该论文提出了一种 PromptIR 的快速恢复图像的方式,通过使用提示语对特定串行卷积网络的应用,在不同类型和级别的退化情况下提高了图像恢复性能,实现了对不同退化类型和级别的推广,并在图像去噪、去雨和去雾方面实现了最先进的结果。
利用频率偏差进行图像恢复,以解决正常重建保真度和异常重建区分性之间的权衡问题,提出了一种新的自监督图像恢复任务 —— 频率感知图像恢复(FAIR),在各种缺陷检测数据集上以更高的效率实现了最先进的性能。
通过频域挖掘和调制,我们提出了一种自适应的全功能图像恢复网络,该网络能够根据不同的输入降解类型强调信息丰富的频带,从而实现逐步引导的恢复。广泛的实验证明,该方法在去噪、去雾、去雨、运动去模糊和低光图像增强等不同图像恢复任务上实现了最先进的性能。
Mar, 2024
本研究提出了利用退化对齐的语言提示来实现准确、精细和高保真度的图像恢复,通过图像恢复提示对图像的退化程度进行自动辨别,同时结合预训练的多模态大型语言模型获取与人类感知紧密相关的高级语义先验,综合比较分析表明,该方法在图像感知质量上达到了新的最先进水平,尤其是在基于无参考度量的真实场景中。