AAAIDec, 2023

RadOcc:通过渲染辅助蒸馏学习跨模态占位知识

TL;DR探索 3D 场景的占据状态和语义的三维占据预测任务中,通过利用更强大的多模态模型在训练时指导视觉模型,提出了渲染辅助蒸馏的范例 RadOcc,其中利用可微的体积渲染在透视视图中生成深度和语义图,并提出了两个新的一致性标准,即深度一致性损失和语义一致性损失,实验证明该方法在提高各种 3D 占据预测方法方面的有效性。