CVPRMay, 2024
通过码簿进行信息填充的高效协同感知
Communication-Efficient Collaborative Perception via Information Filling with Codebook
Yue Hu, Juntong Peng, Sifei Liu, Junhao Ge, Si Liu...
TL;DR通过交换感知信息来提高个体感知能力的协同感知方法在感知能力和通信成本之间存在着基本的权衡关系。优化感知信息的表示和选择是解决这个瓶颈问题的核心思想。基于码本的信息表示方案使得整数码的传输成为可能，而非高维特征图。信息填充驱动的信息选择方案优化了本地信息以满足每个个体的信息需求，避免了多个个体之间的信息溢出。通过整合这两个设计，我们提出了 CodeFilling，这是一个新颖的通信高效的协同感知系统，极大地改进了感知和通信之间的权衡关系，同时适用于同质和异质协作环境。我们在真实数据集 DAIR-V2X 和模拟数据集 OPV2VH + 上评估了 CodeFilling 的性能。结果显示，CodeFilling 在 DAIR-V2X/OPV2VH + 上的通信量比前沿方法 Where2comm 减少了 1333/1206 倍。我们的代码可以在此网址找到：https URL。