本文提出了一个基于对比学习的模型 SkeletonBYOL,以及一个结合了跨模型对抗学习(CMAL)和跨流协作学习(CSCL)的联合框架 ACL,用于骨架姿态下的行为识别任务。实验结果表明该方法在多个数据集和评估协议下均实现了优异的性能。
Jul, 2023
本文提出利用时态梯度提升多模态特征提取以改善在少量标记数据情况下的半监督视频动作识别,方法在多个半监督设置中均取得了最先进的结果。
Nov, 2021
我们提出了一种用于基于骨架的动作识别的框架(STD-CL),通过解耦空间和时间特征并应用注意力特征到对比学习,改进了全局特征的语义,提高了准确性,在 NTU60、NTU120 和 NW-UCLA 基准数据集上实现了改进。
Dec, 2023
通过利用不同视频播放速度下不改变动作的特性,利用未标记的视频,学习两通道时间对比模型,提取时间信息并在多个基准数据集和网络架构上实现优异的半监督图像识别效果。
Feb, 2021
提出了一种基于磁盘聚类的统一框架,它可以处理和结合不同类型的较低需求的弱监督,从视频中监测时空活动,并将其应用于训练设置中的不同类型的监督信号实验结果证明:该模型在 UC101-24 和 DALY 数据集上具有竞争性能,而且与之前的方法相比,使用的监督信号更少。
Jun, 2018
本研究提出了一种 Action Sensitivity Learning 框架,旨在识别和定位动作示例,并通过轻量级的 Action Sensitivity Evaluator 和 Action Sensitive Contrastive Loss 实现对应的学习和训练。实验结果表明,该框架在多种场景下均优于现有技术,达到了最高的平均 mAP 值。
May, 2023
本论文旨在提高弱监督行动定位任务的性能,通过设计了 Fine-grained Sequence Distance(FSD)对比和 Longest Common Subsequence(LCS)对比两个互补型对比模块(Contrastive Objectives),解决了现有方法中分类学习与本地化学习之间的严重模糊性问题。
Mar, 2022
提出了一种新颖的自适应递增学习模型,通过改进聚类置信度和可变速增量实例学习策略的设计,提高无监督时间动作定位的效果。
文章通过自监督学习方法,提出了一个基于时间均衡的学生 - 教师半监督学习框架,动态地结合具有时变不变性和时变区别性的两个教师的知识,从而取得了 UCF101,HMDB51 和 Kinetics400 三个动作识别基准数据集的最新性能。
Mar, 2023
通过整合空间关系和时间信息,本文提出了一种新型的少样本动作识别方法 Spatial Alignment Cross Transformer (SA-CT),并利用预训练模型进一步提升性能。
Aug, 2023