基于 cGAN 的治疗性活动高维 IMU 传感器数据生成
通过聊天 GPT 生成不同的文本描述活动的文字描述,通过运动合成模型 T2M-GPT 生成 3D 人体运动序列,然后转换成流的模拟 IMU 数据,将其与部分真实 IMU 数据结合训练 HAR 模型可以显著提高其性能
May, 2023
为了改进基于可穿戴传感器的人体活动识别,本文提出了一种从 3D 骨架姿势序列中直接生成传感器数据的姿势到传感器网络模型,并同时训练姿势到传感器网络和人体活动分类器,通过优化数据重构和活动识别来改进性能。实验结果表明该框架优于基线方法,并在 MM-Fit 数据集上取得了显著的性能提升。
Apr, 2024
通过生成式人工智能从文本描述中自动生成虚拟 IMU 数据,人类活动识别(HAR)领域能够解决有限标注数据的问题。此外,还探讨了生成式人工智能在生成基准数据集、特定于 HAR 的模型开发、HAR 中的层次结构探索、复杂活动分解以及健康感知和活动总结等领域有着前景的研究方向。
Oct, 2023
基于 Residual 网络和 Residual MobileNet 集成的分层多结构方法(FusionActNet)能够有效地对不同的人类活动进行分类识别,并在 UCI HAR 和 Motion-Sense 数据集上取得了 96.71% 和 95.35% 的准确率。
Oct, 2023
本文提出了使用卷积神经网络 (CNNs) 对人类活动进行分类的方法,该方法利用惯性传感器测量身体的加速度和角速度,并使用不同的神经网络结构适应运动信号,探究单个、双个和三个传感器系统的分类潜力,实验结果表明该方法具有很好的分类性能。
Jun, 2019
在人类活动识别领域,缺乏大型标记数据集是主要挑战之一。为了解决数据稀缺的问题,最近开始研究跨模态迁移方法,将现有数据集从源模态(如视频)转换为目标模态(IMU)。本研究通过大规模评估语言驱动的跨模态迁移,提出了两个针对实际人类活动识别应用场景的 IMUGPT 扩展,一个是能够滤除无关动作序列以确保生成虚拟 IMU 数据的相关性的动作过滤器,另一个是一套用于测量生成数据多样性的指标,帮助确定何时停止生成虚拟 IMU 数据以实现有效和高效的处理。我们证明了我们的多样性指标可以减少生成虚拟 IMU 数据所需的工作量至少 50%,从而使 IMUGPT 在纯概念证明之外具备实际应用的价值。
Feb, 2024
利用可穿戴设备进行动作重建已成为一种经济且可行的技术,在稀疏的惯性测量单元(IMUs)数据上建立人体姿势模型存在着困扰,本文通过多传感器的空间重要性和文本描述的监督引入不确定性来获取每个 IMU 的加权特征,并设计了一种层次时间变换器(HTT)和对比学习来实现传感器数据与文本语义的精确时间和特征对齐。实验证明我们的方法在多个指标上相比现有方法有显著改进,尤其是在文本监督下,我们的方法不仅能区分诸如坐下和站起之类的模糊动作,还能产生更精确和自然的动作。
Dec, 2023
本研究提出了一种基于惯性测量单元数据和自我视角摄像头提取的活动分类方法,通过胶囊网络和卷积长短时记忆框架提取特征和捕获行为的时间因素,并且使用基于遗传算法的方法自动系统地设置各种网络参数。实验证明,这种方法的综合准确度明显提高,可以更准确地对活动进行分类。
May, 2019
本研究通过对不同样本生成过程和验证协议进行分析,实施和评估了多种高性能方法,从手工制作的方法到卷积神经网络等各种方法,发现当前的实验评估方法都无法在可穿戴传感器数据的背景下执行活动识别,在此之中,识别准确度显着下降,该研究着重解决了在可穿戴传感器数据基础上的人体活动识别中影响识别准确性的关键问题,是第一篇解决这个问题的研究。
Jun, 2018
通过计算机视觉和惯性测量单元 (IMU) 等广泛应用的技术以及最近在临床和研究环境中日益流行,来评估人体的身体活动。然而,为了增加患者在实验室外的跟踪可行性,有必要减少运动采集设备。在这方面,IMU 设备和单一摄像头系统是有希望的解决方案。此外,还需要开发能够在野外环境中识别和处理临床相关数据的机器学习系统,因此确定这些系统的理想输入至关重要。
Feb, 2024