MMJun, 2024

移动设备上实时神经体渲染的研究

PDF
TL;DRNeural Radiance Fields (NeRF) is a real-time rendering technique for synthesizing 3D objects from 2D images, with a focus on examining the system perspective and identifying critical control knobs for improving performance on mobile devices.
发现论文，激发创造
  • MobileNeRF：利用多边形光栅化管道在移动架构上高效渲染神经场

    本文介绍了一种基于纹理多边形的新型 NeRF 表示方法，能够高效地使用标准渲染管道合成新图像，这种方法允许使用传统的多边形光栅化方法对 NeRF 进行渲染，从而在各种计算平台上实现交互式帧速率。

    Jul, 2022

  • FastNeRF: 高保真神经渲染，200FPS

    文章提出了 FastNeRF 方法，通过图形学中的因式分解实现深度辐射图的高效缓存和查询，可在高端消费者 GPU 上以 200Hz 的速率呈现高保真度的照片般逼真的图像，比原始 NeRF 算法快 3000 倍，同时保持视觉质量和可扩展性。

    Mar, 2021

  • BeyondPixels：神经辐射场演变的综合综述

    本文综述了近年来神经辐射场（NeRF）技术在 3D 渲染和视角合成领域的最新研究进展和其不同的架构设计。

    Jun, 2023

  • 基于神经辐射场的视觉渲染方法综述

    近年来，神经辐射场（NeRF）在计算机视觉和图形领域取得了显着进展，为解决 3D 场景理解、新视角合成、人体重建、机器人等关键任务提供了强有力的技术支持。本文对过去两年内关于 NeRF 的研究文献进行了深入分析，在详细阐述 NeRF 核心架构的基础上，讨论了 NeRF 的各种改进策略，以及在不同应用场景中的案例研究，展示了其在不同领域的实际应用价值。同时，本文还详细介绍了 NeRF 模型训练所需的关键资源，最后提出了关于 NeRF 未来发展趋势和潜在挑战的前瞻性讨论，旨在为该领域的研究人员提供研究灵感，促进相关技术的进一步发展。

    Mar, 2024

  • 神经辐射场（NeRFs）：综述与一些最近的发展

    Neural Radiance Field (NeRF) is a framework representing a 3D scene with MLP, achieving state-of-the-art photorealistic image renderings for view synthesis and expanding capabilities to generate views from dynamic scene representations with fewer images for training.

    Apr, 2023

  • 朝着稳健的 NeRF 评估框架

    本文介绍了一个新的测试框架以专门用于评估神经辐射场（NeRF）模型的性能，该框架通过训练和评估 NeRF 的显式辐射场表示来解耦神经渲染网络和 NeRF 管道，并提出了一种配置方法来生成特定于评估目的的表示形式。我们还提出了一种新的指标来衡量该框架的任务复杂性，该指标考虑到了视觉参数和空间数据的分布。

    May, 2023

  • Enhance-NeRF: 神经辐射场的多重性能评估

    该研究通过提出 Enhance-NeRF 模型，增强神经放射场（NeRF）在虚拟现实和增强现实等领域的三维重建应用，改进了场景识别和学习能力，有望广泛应用于照明、材质和形状的室外场景重建，具备插拔式的易用性，并能够与其他 NeRF-based 模型轻松集成。

    Jun, 2023

  • 移动设备上的高效神经光场

    该研究论文介绍了一种新型网络结构，通过通道结构剪枝的压缩技术，可以在移动设备上高效运行，对于新颖视图合成、神经辐射场、神经光场和移动设备都具有重要的研究意义。

    Jun, 2024

  • MixRT：混合神经表示用于实时 NeRF 渲染

    通过提出了 MixRT，一种包含低质量网格、视角依赖位移图和压缩 NeRF 模型的新型 NeRF 表示方法，有效利用现有图形硬件的能力，在边缘设备上实现了实时 NeRF 渲染，速度快（MacBook M1 Pro 笔记本分辨率 1280 x 720 超过 30 FPS），渲染质量更好（Unbounded-360 数据集室内场景 0.2 PSNR 高），存储大小更小（与最先进的方法相比少于 80%）。

    Dec, 2023

  • NeRF++：分析和改进神经辐射场

    通过 NeRF 的方法来实现对于图像的 View Synthesis, 本文提到了 NeRF 的成功之处以及在应用于大规模无界三维场景中进行改进，使其在 360° 的拍摄模式下提高拍摄质量。

    Oct, 2020