AAAIApr, 2020
DSTC8-AVSD:多模态语义 Transformer 网络及检索式词汇生成器
DSTC8-AVSD: Multimodal Semantic Transformer Network with Retrieval Style Word Generator
Hwanhee Lee, Seunghyun Yoon, Franck Dernoncourt, Doo Soon Kim, Trung Bui...
TL;DR提出了一种多模态语义变形器网络,基于注意力词嵌入层的变形器架构和查询单词嵌入层生成单词。该模型在 AVSD 任务中取得了优异的表现。