单图像神经再渲染技术
使用单幅图像进行实时推断和渲染逼真的三维人体外貌的 R$^2$Human 方法结合了隐式纹理场和显式神经渲染的优势,利用新的表示法 Z-map 并通过傅里叶占用场重建了精细的三维几何,从而在合成数据和挑战性的现实世界图像上取得了最先进的性能。
Dec, 2023
本文提出了一种综合的神经方法,用于从密集的多视角视频中重建、压缩和渲染人类表演。该方法桥接了传统的动画网格工作流和一类高效的神经技术,其中包括神经表面重构器和混合神经跟踪器,并实现了各种带宽设置下的从动态纹理到光图渲染的渲染方案,展示了其在各种网格应用和各种平台的逼真自由视点体验中的有效性。
Sep, 2022
本文介绍了一种新的人类视频合成方法,通过两个卷积神经网络(CNNs)明确分离 2D 屏幕空间中的人类嵌入和时间相干的细节,其中第一个 CNN 预测一个动态纹理映射,第二个 CNN 条件下第一个 CNN 的输出生成最终的视频。 该方法被应用于人类重演和单目视频的新视图合成等多个领域,并且在质量和数量方面都有显着的提高。
Jan, 2020
本文提出了一种新的姿态转换方法,通过使用组合神经网络,预测人的轮廓,服装标签和纹理,并在推理时利用训练有素的网络生成一个外观及其标签的统一表示,以对姿势变化做出响应,并使用背景完成外观的呈现,从而实现保留人物身份和外观,具有时间上的一致性和泛化能力。
Dec, 2020
本文提出了一种基于端到端学习策略的方法,利用行人重新识别作为感知度量,生成单张人体图像的纹理贴图,实验结果表明,我们的模型可以从单张图像中生成纹理贴图,并证明我们的纹理比其他可用方法生成的质量更高,我们还将应用范围扩展到其他类别,并探索了我们生成的纹理的可能利用途径。
Apr, 2019
通过基于单图几何重建的框架实现针对人体的单张图片重照,在去除光照的同时,通过采用经过修改的 HRNet 和基于光线追踪的每像素灯光表示方法,恢复逼真的阴影,展现出包括硬阴影在内的高频阴影效果,优于先前的方法。
Jul, 2022
本研究通过对旅游地标的网络照片进行传统 3D 重建,将场景逼近为一个点云,并在每张照片上进行重新渲染。使用神经网络学习初始渲染到实际照片的映射,还考虑到短暂物体的位置以进行场景修正。通过多个公共数据集的评估,展示了场景外观和语义标签的真实操作。与之前的场景重建工作进行了比较。
Apr, 2019
本研究基于深度学习的体积表示方法,提出利用人体图片,通过几何变形的方式隐式学习稠密特征体积,并通过卷积解码器将特征体积映射回 RGB 空间,实现了人体图像的任意变形,取得了着装识别和人像表情生成方面的最新研究成果。
Jun, 2020
使用多视角图像建议一种可伸缩的神经网络框架来重建 SMPL 模型子空间中的人体 3D 网格,并在现实图像上表现优异,特别是在形状估计方面。
Aug, 2019