Aug, 2023

探索 CLIP 在糖尿病视网膜病变领域泛化中的迁移学习能力

TL;DR糖尿病视网膜病变(DR)是视力障碍的主要原因之一,需要早期检测和治疗。本文研究了糖尿病视网膜病变(DR)分类问题中跨域泛化的挑战,通过使用 CLIP 模型在不同领域和数据分布下进行转化学习,引入了一种名为 CoOpLVT 的多模态微调策略来增强上下文优化,实验结果表明该方法相较于基线模型提高了 1.8% 的 F1 分数,为 DR 分类的有效跨域泛化提供了希望。