Jun, 2024
MissionGNN: 基于层次多模态图神经网络的弱监督视频异常识别与任务特定知识图生成
MissionGNN: Hierarchical Multimodal GNN-based Weakly Supervised Video Anomaly Recognition with Mission-Specific Knowledge Graph Generation
Sanggeon Yun, Ryozo Masukawa, Minhyoung Na, Mohsen Imani
TL;DR这篇论文介绍了一种基于层次图神经网络（GNN）的新型模型 MissionGNN，通过利用先进的大型语言模型和全面的知识图谱，在 VAR 的弱监督学习中解决了异常检测和识别中的挑战。通过自动化的任务特定知识图生成，我们的模型提供了一种实际高效的解决方案，可以在实时视频分析中实现完全的帧级训练，避开了先前基于分割或多模态方法的限制。在基准数据集上的实验验证证明了我们模型在 VAD 和 VAR 中的性能，突显了它在视频监控系统中重新定义异常检测和识别领域的潜力。