May, 2024
针对医疗报告生成的主题可分离句子检索
Topicwise Separable Sentence Retrieval for Medical Report Generation
TL;DR我们介绍了一种针对医学报告生成的主题分离句子检索(Teaser)方法,通过将查询分类为常见和少见类型以学习不同的主题,提出主题对比损失来有效地对齐主题和查询,同时使用抽象器模块在提取视觉特征后帮助主题解码器更深入地理解视觉观察的意图,在MIMIC-CXR和IU X-ray数据集上的实验证明了Teaser超过了现有的模型,同时验证了其有效地表示罕见主题并建立查询和主题之间更可靠的对应关系的能力。