该论文介绍了一种新的基于 HMM 的弱监督行为分割框架,其中提出了一种新的 Viterbi 算法和特征 affinities 的正则化方法来提高算法性能。
Feb, 2020
提出了一种层次化方法,通过结构化识别来解决从有序动作标签中弱监督学习人类动作的问题,并将一帧 RNN 模型与粗略概率推理相结合,以实现长序列的时间对齐和迭代训练。
Jun, 2019
该研究论文介绍了一种弱监督的行为检测和时间分割方法,利用被动数据采集到的行为集合训练模型,以实现自动的视频行为分割和标注。
Jun, 2017
本文提出一种基于双分支神经网络的弱监督动作分割方法,并提出了一种新的相互一致性损失(MuCon)来保证分割的一致性,结合文本预测损失达到了当前最新技术方法的准确率,且训练时间快了 14 倍,推理时间快了 20 倍,同时证明了 MuCon 损失在全监督设置下也有益处。
Apr, 2019
本文介绍了一种使用自监督学习和 RNN/HMM 算法实现无监督动作分割的方法,该方法优于现有技术在多个数据集上的表现。
Apr, 2021
本文提出了一种新的行为建模框架,包括一种名为 Temporal Convolutional Feature Pyramid Network(TCFPN)的新型时态卷积网络和一种名为 Iterative Soft Boundary Assignment(ISBA)的新型弱监督序列建模训练策略,用于进行长且未修剪的视频中的弱监督人类行为分割。 并以 Breakfast 和 Hollywood Extended 这两个基准数据集进行评估,实验结果表明,其方法达到了与最先进方法相当或更好的性能。
Mar, 2018
本文提出了一种弱监督学习的端到端方法,将视频分成小的时间段,并预测每个时间段的动作标签及其长度。通过测量时间段与注释动作标签之间的一致性,该方法可学习将视频划分为类一致的区域,并在三个数据集上实现了最先进的结果。
Mar, 2020
本文提出了一种新的有约束区分前向损失(CDFL)方法,应用于训练视频中基于门控循环单元(GRU)的隐马尔可夫模型(HMM)框架下的视频帧动作分类。该方法有效提高了行动分割和校准的准确性。
Sep, 2019
本文从聚类的角度提出了一种框架来解决视频动作分割中矛盾间隙带来的错误伪标签问题,并引入了聚类损失函数,使得相同动作段内的帧特征更加紧凑,实验结果表明该方法有效。
Dec, 2022
提出半监督学习方法解决在只有一小部分有标签数据和大量没有标签数据的工程视频中,发现行动并将其分段的任务,其中两个新的损失函数和自适应边界平滑方法也被提出,并在三个基准测试中评估,结果表明它们显著提高了行为分割性能,并在用少量标记数据(5%和 10%)的情况下取得了与全监督相当的结果。
Jul, 2022