去噪扩散模型中的头部旋转
该研究提出一种针对去噪扩散概率模型 (DDPM) 的替代性噪声空间,以便进行广泛的编辑操作,并介绍了一种反演方法,用于提取任何给定图像(真实或人工生成的)的适合进行编辑的噪声生成图。
Apr, 2023
使用去噪扩散模型,我们提出了一种名为 PIDM 的人体图像扩散模型,解决了复杂的转换问题,并展示了在两个大型基准测试中的显着结果,以及如何在下游任务中使用生成的图像。
Nov, 2022
本文描述了一种更高效的迭代隐式概率模型 —— 去噪扩散隐式模型(DDIMs),通过构建一类非马尔科夫扩散过程来加速采样过程,相对于去噪扩散概率模型(DDPMs)可以使采样速度提升 10 倍至 50 倍。这种模型可以用于图像生成和语义意义化的图像内插。
Oct, 2020
现有的属性编辑方法将语义属性视为二进制,导致每个属性只能进行一次编辑。然而,如眼镜、微笑或发型等属性展示了广泛的多样性。在本研究中,我们通过建模属性编辑的多维性质来提出 “多样属性编辑” 的任务,从而使用户能够为每个属性生成多个合理的编辑。我们利用预训练 GAN 的分离潜空间和训练一个去噪扩散概率模型(DDPM)来学习用于多样编辑的潜分布。具体而言,我们通过嵌入具有单个属性变化的图像对来训练 DDPM,从而得到能够实现多样属性编辑的潜子空间。在高度压缩的潜空间中应用扩散使我们能够在有限的计算资源内模拟丰富的编辑分布。通过广泛的定性和定量实验,我们展示了我们的方法在多样属性编辑方面的有效性。我们还展示了我们的方法在各种面部属性的三维编辑方面的结果。
Nov, 2023
我们开发了基于分数的生成模型(SGMs)和去噪扩散概率模型(DDPMs)的扩展,用于三维旋转的李群 SO(3),并应用于合成密度和姿态估计任务,在天体物理学 / 宇宙学中预测相关星系方向。
Dec, 2023
通过匹配隐式和显式因素,我们提出了一种新的方法,以解决生成模型中的采样难题,该方法利用隐式模型匹配噪声数据的边缘分布和前向扩散的显式条件分布,以有效地匹配联合降噪分布,并获得与扩散模型相当的生成性能和比采样步骤少的模型相比更好的结果。
Jun, 2023
该研究介绍了一种生成模型 DDMM,可以在大量医学影像分割应用中实现无监督生成逼真的 X 光图像和相关分割结果,并提供数据增强来优化分割性能,优于其他采用数据中心化方法的技术。
Apr, 2023
通过对 DDPM 模型进行简单修改,可以在保持高质量样本的同时达到具有竞争力的对数似然值,并学习反向扩散过程的方差,从而使用数量级更少的正向传递采样。使用精度和召回率比较 DDPM 和 GAN 模型的性能,并证明这些模型的样本质量和似然值可以与模型容量和训练计算平稳地提高。
Feb, 2021
通过利用旋转图像的特征映射,精确跟踪控制点并保证高图像保真度,我们提出了一种名为 RotationDrag 的新方法,该方法在用户意图的平面旋转图像内容方面改进了基于点的图像编辑性能,并构建了一个针对平面旋转场景的基准测试 RotateBench 来评估点基图像编辑方法的性能。
Jan, 2024