Jun, 2021
视频 Transformer 中的轨迹注意力
Keeping Your Eye on the Ball: Trajectory Attention in Video Transformers
Mandela Patrick, Dylan Campbell, Yuki M. Asano, Ishan Misra, Florian Metze...
TL;DR我们提出了一种新的视频转换器的降压块 - 轨迹关注,并提出了一种解决计算和存储在输入大小上的二次依赖性的新方法,其中特别重要的是对于高分辨率或长视频。将这些想法应用于视频行动识别的具体任务中,并在 Kinetics,Something-Something V2 和 Epic-Kitchens 数据集上取得了最先进的结果。