Jun, 2024
SimulTron: 设备本地实时语音翻译
SimulTron: On-Device Simultaneous Speech to Speech Translation
Alex Agranovich, Eliya Nachmani, Oleg Rybakov, Yifan Ding, Ye Jia...
TL;DRSimulTron 是一种轻量级的直接 S2ST 模型,通过在移动设备上进行实时评估,优于 Translatotron 1 的性能,并在 MuST-C 数据集上实现了优越的 BLEU 得分和延迟,展示了在 Pixel 7 Pro 设备上同时进行 S2ST 的潜力。