Oct, 2023
冻结的大规模模型在多模态任务导向对话中的应用
Application of frozen large-scale models to multimodal task-oriented dialogue
Tatsuki Kawamoto, Takuma Suzuki, Ko Miyama, Takumi Meguro, Tomohiro Takagi
TL;DR使用现有的 LENS Framework 来测试对话系统的多模态任务的可行性,与以往的基于 Transformer 的模型相比,我们的方法在流畅性、有用性以及相关性和连贯性上均有显著提升,同时证明了大规模预训练模型对于多模态任务导向对话系统的有效性。