Jul, 2024
教学视频中的开放事件过程规划
Open-Event Procedure Planning in Instructional Videos
TL;DR在这篇论文中,我们引入了一项名为开放事件过程规划(OEPP)的新任务,旨在验证规划器是否能够将学到的知识转移到在训练过程中未见过的相似事件。我们重新构建了一个基于现有数据集的OEPP任务基准,并将所涉及的事件分为基础和新颖两部分。通过评估不同事件步骤的描述相似性以及多个阶段的知识传递能力,我们在数据收集过程中精心确保了基础和新颖事件的程序知识的可转移性。基于收集到的数据,我们进一步提出了一个专门为OEPP设计的简单且通用的框架,并使用各种基准方法进行了广泛的研究,对结果进行了详细而深入的分析。