Jul, 2024

使用文字引导的扩散模型增强标记效率的医学图像分割

TL;DR本研究提出了一种增强的扩散分割模型 (TextDiff),通过廉价的医学文本注释来改进语义表示,从而明确建立扩散模型的语义表示和语言对应关系。该模型通过训练交叉注意机制和像素分类器来增强语义表示,表现优于最先进的多模态分割方法,仅需少量训练样本。