Nov, 2023

MetaDreamer：高效文本生成三维模型的几何和纹理分离

PDF
TL;DRMetaDreammer 是一种基于 2D 和 3D 先验知识的两阶段优化方法，通过在优化过程中分别使用 2D 和 3D 先验知识，有效减轻几何与纹理之间的相互依赖，从而在 3D 生成过程中节省时间并生成高质量的 3D 对象。与现有技术相比，MetaDreammer 是一种高效的文本到 3D 生成方法，并且还引入了图像控制来增强对 3D 生成过程的可控性。
generative models3d object synthesis2d and 3d prior knowledgemetadreamertext-to-3d generation method
发现论文，激发创造
  • RoomDreamer: 基于文本驱动的连贯几何纹理室内场景 3D 合成

    本文提出了基于自然语言的房间风格合成算法 RoomDreamer，通过 Geometry Guided Diffusion 和 Mesh Optimization 处理实现 3D 室内场景生成，大幅提升了几何和纹理的一致性和图像质量。

    May, 2023

  • GeoDream: 高保真和一致的 3D 生成中的解耦 2D 和几何先验

    通过结合三维几何先验和二维扩散先验，GeoDream 方法能够生成具有一致的三维几何结构的文本到三维模型，并提供更高分辨率、真实感的渲染和更好的语义一致性。

    Nov, 2023

  • TextureDreamer：基于几何感知扩散的图像引导纹理合成

    TextureDreamer 是一种新颖的图像引导纹理合成方法，能够将可在任何类别的目标 3D 形状上转移到少量输入图像（3 到 5 张）中的纹理。

    Jan, 2024

  • HyperDreamer: 由单张图像生成和编辑逼真的三维内容

    HyperDreamer 是一个可视化、可渲染和可编辑的 3D 内容创建工具，通过 360 度网格建模、高分辨率纹理和语义分割等技术，能够从单张图片中生成逼真的 3D 模型，并支持用户友好的编辑操作。

    Dec, 2023

  • Meta 3D 纹理生成：3D 物体快速、一致纹理生成

    基于文本到图像模型，研究生成具有全局一致性和高分辨率 UV 纹理的 Meta 3D TextureGen 方法，实现了高质量、高效率的任意复杂度三维纹理生成。

    Jul, 2024

  • 三维元几

    我们介绍了 Meta 3D Gen (3DGen)，一种用于文本到 3D 资源生成的最新快速流程。3DGen 以不到一分钟的时间提供高保真度、高质量的 3D 形状和纹理的 3D 资源创建。它支持基于物理的渲染（PBR），用于实际应用中的 3D 资源重照。此外，3DGen 通过用户提供的附加文本输入支持先前生成的（或由艺术家创建的）3D 形状的生成性重绘。3DGen 集成了我们为文本到 3D 生成和文本到纹理生成开发的关键技术组件 Meta 3D AssetGen 和 Meta 3D TextureGen。通过结合它们的优势，3DGen 同时以三种方式表示 3D 对象：视图空间、体积空间和 UV（或纹理）空间。这两种技术的集成在单阶段模型方面实现了 68% 的胜率。我们将 3DGen 与众多行业基准进行比较，并表明它在复杂的文本提示方面的忠实度和视觉质量方面优于它们，同时速度显著更快。

    Jul, 2024

  • GraphDreamer: 从场景图生成组合式三维场景合成

    通过使用场景图生成组成 3D 场景的图形图像扩散预训练模型，利用节点和边的信息，GraphDreamer 能够生成高保真的分解对象实体的组合性 3D 场景。

    Nov, 2023

  • TexDreamer：面向零样本高保真 3D 人体纹理生成

    利用 TexDreamer 模型，我们通过有效的纹理自适应微调策略将大型文本到图像模型转化成语义化 UV 结构，在保留其原始泛化能力的同时，能够在数秒内生成高保真度的 3D 人体纹理。此外，我们还介绍了包含 50k 高保真度的纹理及文本描述的 ATLAS 高分辨率 3D 人体纹理数据集。

    Mar, 2024

  • 3D-SceneDreamer: 文本驱动的 3D 一致场景生成

    利用文本驱动的 3D 场景生成技术，在构建 3D 场景时通过使用现有的生成模型进行图像变形和修复，同时结合查询和聚合全局 3D 信息来生成高质量的新内容，并在支持多种场景生成和任意相机路径的同时改善视觉效果和 3D 一致性。

    Mar, 2024

  • GET3D: 从图像中学习高质量 3D 纹理形状的生成模型

    GET3D 是一种 3D 生成模型，能够直接生成具有复杂拓扑结构、丰富几何细节和高保真纹理的显式纹理 3D 网格，从而显著改进了以往的方法。

    Sep, 2022