Mar, 2024
DrFuse: 临床多模态融合学习非配备模态和模态不一致性的解耦表示
DrFuse: Learning Disentangled Representation for Clinical Multi-Modal
Fusion with Missing Modality and Modal Inconsistency
TL;DR将电子健康档案(EHR)和医学影像相结合对临床医生在诊断和预测预后中至关重要。作者提出了一种名为DrFuse的方法,通过分离跨模态的共享特征和每个模态内的独特特征来解决缺失模态和模态不一致的问题,在真实世界的大规模数据集上验证了该方法的有效性并超越了现有模型。