Aug, 2024
基于3D感知的自我中心视频中的实例分割与跟踪
3D-Aware Instance Segmentation and Tracking in Egocentric Videos
TL;DR本研究解决了自我中心视频中由于快速相机运动、频繁遮挡和有限可见性所带来的3D场景理解挑战。提出了一种新的方法，通过结合场景几何、3D物体中心跟踪和实例分割，实现了动态自我中心场景的稳健分析。实验结果表明，该方法在跟踪和分割一致性指标上结合空间和时间线索显著优于现有的二维方法，尤其是提升了关联准确率和IDF1分数。