跨数据集基于骨架的动作识别中的时空立方体学习
本文探讨了基于自监督学习的骨骼动作识别中的表征学习问题,提出了一种多任务自监督学习的方法,包括运动预测、拼图识别和对比学习等方法。实验表明该方法在不同配置下的动作分类器上表现出优异的性能。
Oct, 2020
本文研究骨架为基础的人体动作识别的当前和未来发展方向,以 Skeletics-152、Skeleton-Mimetics、Metaphorics 和 NTU-120 等数据集作为研究对象,旨在评估现有方法和数据集的优劣,并开辟人体动作识别的新领域。
Jul, 2020
本研究提出了一种自监督时序领域自适应方法,将动作分割任务作为一个跨领域问题进行重新构造,通过利用未标记的视频来解决由空间 - 时间变化引起的域间差异问题,同时还使用二进制和连续领域预测两个辅助任务,以匹配局部和全局时间动态的特征空间,表现优于其他域自适应方法,并具有使用更少标记训练数据实现相当性能的优势。
Mar, 2020
我们提出了一种用于基于骨架的动作识别的框架(STD-CL),通过解耦空间和时间特征并应用注意力特征到对比学习,改进了全局特征的语义,提高了准确性,在 NTU60、NTU120 和 NW-UCLA 基准数据集上实现了改进。
Dec, 2023
本论文提出了一种基于骨架的行为识别的自监督学习方法,通过噪声对比估计学习骨架表示的不变性以及各种增强策略。该方法在 PKU 和 NTU 数据集上进行了验证,并在多个下游任务中实现了最新水平。
Aug, 2021
基于骨骼的动作识别的训练方法之一是基于监督学习的独热分类,这需要大量的预定义动作类别注释;而基于自监督学习的方法涉及预处理任务中的骨架变换,可能会损害骨架结构。为了解决这些挑战,我们引入了一种新颖的基于骨骼的训练框架(C$^2$VL),基于跨模态对比学习,使用渐进蒸馏从视觉 - 语言知识提示中学习无关任务的人类骨架动作表征。
May, 2024
我们提出了一种新颖的无监督骨架动作识别系统,该系统基于编码器 - 解码器递归神经网络,可以无需提供任何标签或摄像头深度输入,并可在各维度的身体关键点(2D 或 3D)和附加提示描述移动的情况下操作,并将其与最新的无监督骨架方法进行比较。方法表现出更好的交叉视图性能,且与有监督骨架动作识别表现相似。
Nov, 2019
这篇研究论文介绍了从基于深度学习架构的角度全面讨论使用三维骨架数据进行动作识别,并详细介绍了基于循环神经网络 (RNN)-based、卷积神经网络 (CNN)-based 和图卷积网络 (GCN)-based 的主流动作识别技术,并介绍了包括 NTU-RGB+D 在内的多个数据集和算法。
Feb, 2020
本论文介绍一种基于数据增强的新方法,使用 DDPM 和 ST-Trans 生成高质量和多样化的顺序动作序列,有效地提高了现有动作识别模型的性能。
Feb, 2023
该论文提出了一种基于图像分类的骨架视频动作识别方法,通过图像映射和卷积神经网络构建实现了在多个数据集上的最新成果。
Apr, 2017