Apr, 2024

InstantMesh: 基于稀疏视角大规模重建模型的单张图像高效三维网格生成

TL;DRInstantMesh是一种从单个图像进行即时3D网格生成的前向框架,具有最先进的生成质量和可扩展的训练能力。通过发挥现有多视角扩散模型和基于LRM架构的稀疏视图重建模型的优势,InstantMesh能够在10秒内创建多样化的3D资源。通过将可微分的等值面提取模块集成到我们的框架中,并直接在网格表示上进行优化,以提高训练效率和利用更多几何监督,例如深度和法线。公共数据集上的实验结果表明,InstantMesh在定性和定量上明显优于其他最新的图像到3D基准。我们发布了InstantMesh的所有代码,权重和演示,希望它能为3D生成AI社区做出巨大贡献,并赋予研究人员和内容创作者更多的力量。