Apr, 2024

RainyScape: 无监督下的湿天气场景重建,利用解耦的神经渲染

TL;DRRainyScape 是一个无监督的框架,能够从多角度的雨天图像集合中重建干净的场景。该框架包含两个主要模块:神经渲染模块和雨预测模块,通过学习可捕捉场景雨水特征的预测网络和可学习的潜在嵌入,在优化神经渲染管道以获得低频场景表示后,使用自适应的方向敏感梯度重建损失来联合优化这两个模块,从而消除雨水痕迹并生成干净的图像,实验表明该方法在消除雨水痕迹和渲染干净图像方面具有卓越表现,达到了最先进的水平。