May, 2024

多模态跨领域少样本学习用于主体动作识别

TL;DR通过多模态输入和无标签目标数据解决跨领域少样本学习中视角行为识别的两个关键挑战,即视角视频的领域差异和实际应用的计算成本问题。提出了 MM-CDFSL 方法,通过教师模型的多模态蒸馏和集成遮蔽推理,增强模型对目标域的适应性并提高推理速度。在多个视角数据集上的性能优于现有的跨领域少样本学习方法,同时提高了推理速度。