参考引导型可控神经辐射场修复
本研究提出了一种名为 InpaintNeRF360 的框架,通过自然语言指令的帮助,利用可提示分割模型对 NeRF 场景中缺失的区域进行修复。该方法应用了多个视角的分割以保证视角的一致,同时还利用感知先验进行后续的修整以确保视觉真实性并增强了无界面的面与正面场景的灵活性。
May, 2023
利用生成模型 Inpaint4DNeRF,该论文提出了一种基于稳定扩散模型(如 ControlNet)的直接生成方法,在编辑由 NeRF 表示的三维场景时,生成底层完成的背景内容,不论是静态还是动态,以实现 NeRF 修复的双重优势:通过生成种子图像和它们的三维代理,我们可以分别生成一小部分包含合理内容的完成图像,然后在所有完成图像中进行三维多视图一致性维护。
Dec, 2023
本文提出了一种新颖的框架,可以利用扩散模型实现对神经场景中的 3D 内容进行编辑,此方法可以有效地改善 NeRF 的可编辑性、多样性和应用范围,验证结果表明在不同的文本提示下,该算法对 NeRF 中的 3D 目标具有改进的效果。
Jun, 2023
通过 Re-Nerfing 方法,我们在 Neural Radiance Fields 的基础上使用多阶段的方法增加场景的覆盖范围,提高新视角的几何一致性,并通过新合成的图像实现结构和极线约束的优化,对 mip-NeRF 360 数据集进行的实验证明了 Re-Nerfing 的有效性。
Dec, 2023
通过引入本质表征分解的内在神经辐射场 (IntrinsicNeRF) 模型,将 NeRF 神经渲染方法的应用扩展到基于房间尺度的场景中;基于点采样和反射迭代聚类优化的方法使 IntrinsicNeRF 模型可以在无监督的环境下具备传统本质分解约束条件,并展示了在面对具有挑战性序列时,其具有相对稳定的本质分解结果和高保真度的新视角生成效果。
Oct, 2022
我们提出了一种新的框架,通过对扩散模型的温和性进行个性化设置并使用掩蔽对抗训练来缓解图像条件中的文本移位问题,从而解决了使用 NeRF 进行重建时遇到的几个问题,并在各种真实场景上实现了最先进的 NeRF 修复结果。
Apr, 2024
利用拓展到神经辐射场(NeRF)的编辑技术来编辑场景是复杂的,本文提出了利用 NeRF 场景的几何信息作为桥梁来整合 2D 编辑的方法,并引入了一种填充方法来确保对不同图像的 2D 编辑具有鲁棒性。结果表明,该方法比现有的文本驱动 NeRF 场景编辑方法实现了更加一致、逼真和详细的编辑效果。
Apr, 2024
通过 NeRF 的方法来实现对于图像的 View Synthesis, 本文提到了 NeRF 的成功之处以及在应用于大规模无界三维场景中进行改进,使其在 360° 的拍摄模式下提高拍摄质量。
Oct, 2020
用于编辑 NeRFs 的 LAENeRF 是一个统一框架,以实现对 NeRFs 的逼真和非逼真的外观编辑,采用区域选择的体素网格作为局部编辑的起点,并通过学习从射线末端到最终输出颜色的映射来限制内存需求和实现快速优化,最终实现了颜色重新着色和样式化,并在定量和定性方面超越了基线方法。
Dec, 2023