May, 2024
MASA: 带有语义对齐的运动感知遮挡自编码器用于手语识别
MASA: Motion-aware Masked Autoencoder with Semantic Alignment for Sign Language Recognition
Weichao Zhao, Hezhen Hu, Wengang Zhou, Yunyao Mao, Min Wang...
TL;DR提出了一种结合丰富的动作线索和全局语义信息的运动感知遮蔽自编码器(MASA)框架,通过自我监督学习范式实现对手语的全面表示,实现了在四个公共基准测试上的最先进性能。