Oct, 2024

多模态数据的受控解缠信息标准

TL;DR本研究解决了多模态表示学习中信息解缠的难题,提出了一种新的自监督学习方法——解缠自监督学习(DisentangledSSL)。该方法成功地从多个合成和真实数据集中学习到共享与特定模态的特征,并在多个下游任务中优于基线模型,具有显著的实用价值。