基于人类反馈的领域自适应方法提升生成模型的去噪能力
本文提出了一种基于生成对抗网络的方法,通过在像素空间中学习一种转换方法,将源域图像适应为与目标域相同的样子,以解决渲染图像训练模型泛化性不强的问题。该方法不仅可以生成逼真的样本,而且在许多无监督域适应场景中均优于现有技术,并证明了适应过程对于训练期间未被观察到的物体类别的泛化性。
Dec, 2016
本文提出了一种基于领域对齐的有效图像去噪方法,该方法学习了两个图像先验知识,其中特征级先验用于学习对抗训练中的不同噪声水平下对抗特征,像素级先验则用于推动去噪图像到自然图像流形。结果表明,该方法有效地提高了合成和真实噪声图像的去噪能力,并可以用于盲去噪任务以及提高感知质量。
Jun, 2019
本篇论文介绍了一种新的技术,将多步去噪过程压缩为单步的知识蒸馏方法,从而提高图像生成的采样速度,且不需要对抗训练,通过在CIFAR-10、CelebA数据集上的实验表明,我们的去噪学生Denoising Student能够生成与GANs相当的高质量样本,并可扩展到更高像素的图像生成任务。
Jan, 2021
本研究提出了一种新方法,通过在目标特征空间的分离子空间中保留源特征来实现高质量的领域翻译,并且可以通过单个模型平滑地控制对源特征的保留程度,能够比之前工作产生更具一致性和真实性的图像,并在不同变换级别上保持精确的可控性。
Mar, 2023
本文提出一种基于无监督学习的生成扩散先验(GDP)方法,采用预训练的去噪扩散生成模型(DDPM)来有效地建模后验分布,并通过优化去噪过程中的退化模型参数来实现盲图像恢复,进一步采用分层引导和基于块的方法,使GDP能够产生任意分辨率的图像。实验结果表明,GDP在各种图像重建质量和感知质量的基准测试中优于当前的领先无监督方法,在各种任务和各种图像大小的数据集上都表现良好。
Apr, 2023
本文提出了一种DomainStudio方法,用于将在大规模源数据集上预先训练的DDPMs调整到目标域,以在目标域中生成高质量且具有多样性的样本,从而实现无条件少样本图像生成。
Jun, 2023
通过人类反馈信号提高图像生成质量,结合文本到图像生成模型和基于强化学习的人类反馈,标记不真实或不对齐的图像区域以及文本中被误代表或缺失的词,使用多模态变换器自动预测反馈,进一步改进图像生成方法。
Dec, 2023
本研究提出一种方法,通过给待恢复的输入图像添加噪声并进行去噪来使预训练的扩散模型自适应于图像恢复任务。方法基于观察到生成模型空间需要受到约束的原则,通过使用一组捕捉输入图像特征的锚点图像对生成模型进行微调,从而实现受约束的空间。我们通过对比以前的方法并在多个真实世界的恢复数据集上展示出卓越的性能,包括保留身份和图像质量。此外,我们还演示了一种在个性化修复上的重要实际应用,其中我们使用个人相册作为锚点图像来约束生成空间。这种方法使我们能够准确地保留高频细节,这是以前的工作所不能实现的。
Dec, 2023
通过扩散模型在噪声空间中进行域适应,我们展示了一种针对深度学习图像修复的方法,其通过利用多步去噪过程受辅助条件输入影响的独特属性,逐渐将合成数据和真实世界数据的修复结果对齐到一个共同的干净分布。
Jun, 2024