本文提出了一种新的方法,通过使用标签机从医学报告中提取比较先前的信息,并将该先前信息整合到基于 Transformer 的模型中,从而更加真实和全面地生成医学报告。该方法测试表明效果优于之前的最先进模型,提供了一个有前景的方向来弥补医学报告生成中放射科医生和模型之间的知识差距。
May, 2023
本论文提出了一种后验和先验知识挖掘与提取方法,旨在跟随放射科医生的工作模式来生成放射学报告,该方法通过探索医学知识图谱和放射学报告来缓解报告生成中的视觉和文本数据偏误,并利用多域知识蒸馏来生成最终的报告,最终在 MIMIC-CXR 和 IU-Xray 数据集上取得了优于之前最先进模型的效果。
Jun, 2021
本文介绍了使用预构建图嵌入模块(图卷积神经网络建模)来辅助放射图像报告生成的方法,该方法可以对多种疾病发现进行专门的特征学习并建立它们之间的关系,同时提出了用于医学图像报告的新的评估指标,并在公开数据集(IU-RR)上展示了该方法的优异性能。
Feb, 2020
本文提出一种基于多头注意力机制和引入一般和特定的医疗知识的放射学报告生成方法,结合放射学影像的视觉特征,可以提高放射学报告的质量,并在公开数据集上进行的实验结果表明,提出的知识增强方法优于最先进的基于图像字幕的方法。
Dec, 2021
本研究提出了两种方法来消除放射学报告中引用先前报告的问题,一种是基于 GPT-3 的 few-shot 方法来重写没有引用先前报告的医疗报告,另一种是基于 BioBERT 的标记分类方法来直接删除引用先前报告的单词。研究者们认为在这些方法的基础上,CXR-ReDonE 模型能够更好地生成放射学报告,进而在临床管道中得到更好的应用。
Sep, 2022
本文介绍了 PromptRRG,一种利用提示学习激活预训练模型并结合先前知识的辅助放射学报告生成方法,并通过对 Prompt 设计的研究将其分为常见提示、领域特定提示和疾病丰富提示等级。在最大的放射学报告生成基准 MIMIC-CXR 上进行的实验结果显示,我们的方法达到了最先进的性能。
Aug, 2023
提出了一种基于深度学习技术的生成式编码解码模型,通过对大量胸部 X 光图像进行预先训练并提取医疗概念,结合词级别的注意力机制,成功生成精准较为自然的放射学报告。
Jul, 2019
本文提出了使用记忆驱动 Transformer 来生成放射学报告,实验证明该方法可以以更高的质量、更长的长度和更多的医学术语产生放射学报告,此为我们所知第一次在 MIMIC-CXR 上实现放射学报告的生成结果。
Oct, 2020
应用自然语言处理技术如信息抽取和领域特定知识图谱,从放射科医生的听写中自动生成放射学报告,并通过语义相似性度量评估所生成的病态描述,显示出与黄金标准病态描述 97% 的相似度。
Jun, 2022
本文提出了一种基于模板的方法,通过使用多标签图像分类器,变换器模型和 BERT 多标签文本分类器,还有规则系统从放射学图像中生成放射学报告,并在实验中通过 IU Chest X-ray 和 MIMIC-CXR 数据集表现出比现有技术模型更好的性能。
Jun, 2023