TL;DR通过 DDIM 生成过程的类似 SDS 损失的表达方式,本论文发现 SDS 可以看作是一种广义的 DDIM 生成过程,结合创新的噪声抽样方法和流分数蒸馏(FSD)方法,实验证明 FSD 方法显著增强了生成的多样性而不损害质量。
Abstract
Recent advancements in text-to-3d generation have yielded remarkable
progress, particularly through methods that rely on score distillation sampling
(SDS). While SDS exhibits the capability to create impressive 3
在文本到 3D 生成领域,通过得分提取采样 (SDS) 使用的 2D 扩散模型经常导致模糊外观和多面几何等问题,本研究通过分析发现这些挑战的核心是 2D 扩散过程中噪声水平、扩散网络架构和 3D 模型表示之间的相互作用,在这些局限上,我们提出了 StableDreamer,它包含了三个新进展,通过此方法能够解决多面几何问题、生成高保真的 3D 模型并且稳定收敛。