spatio-temporal transformers | BriefGPT

关键词spatio-temporal transformers

搜索结果 - 4

基于 Transformer 的高时序维度解码的视频显著性预测
基于变压器的高时间维度解码网络（THTD-Net）是一种用于视频显著性预测的策略，通过对时态特征进行聚合，从而在常见基准测试中展现出与多分支和过于复杂模型相当的性能。
PDF6 months ago
COMEDIAN：自我监督学习与知识蒸馏在使用 Transformers 进行动作定位中的应用
我们提出了 COMEDIAN，这是一种新颖的用于动作检测的时空变换器初始化流程，其中包括自监督学习和知识蒸馏。通过三个步骤和两个初始化阶段，我们的流程实现了时间戳级别的动作检测任务。实验表明，我们的预训练模式具有卓越的性能和快速收敛，相比未
PDF10 months ago
CEMFormer：使用空间 - 时间 Transformer 从车内和外部相机中学习预测驾驶员意图
本文提出了一种新的预测驾驶行为的框架，称为 “跨视图情节记忆变换器 (CEMFormer)”，能够通过时空变换器来学习驾驶员行为的一致内部表现，集成车内外摄像头信息和历史数据，利用提出的上下文一致损失作为辅助监督信号来改善预测性能，使用 B
PDFa year ago
CVPRSPARTAN：自监督时空 Transformer 方法用于群体活动识别
本文提出了一种新的、简单、有效的自我监督空间时间变换器（SPARTAN）方法来使用未标记的视频数据对小组活动识别（GAR）进行识别。该方法采用 encoder 提取视频特征，并进行长期关系建模，通过处理不同的空间尺度和帧率来进行自我监督训练
PDFa year ago