构建 RadiologyNET:大规模多模态医学数据库的无监督注释
该研究旨在探索多模态联合嵌入并生成医学影像模态和相关放射学报告,并通过受监督和无监督学习的方式,实现在文档检索任务中的表现,发现只需有限的监督即可获得与完全监督方法类似的结果。
Nov, 2018
本文提出了一种新型的协作自监督学习方法,探索兴趣区域之间的潜在病理或生物关系以及主体之间的相似性和差异性信息,无需大量的标记数据即可从辐射组学数据中学习准确的特征表示,进而提高计算机辅助疾病诊断效果。实验结果表明,该方法在分类和回归任务上优于现有的其他自监督学习方法,并具有大规模无标签数据进行自动疾病诊断的潜在优势。
Feb, 2023
提出了一种文本 / 图像深度学习系统,通过融合自然语言处理技术相互作用,在病人扫描图像中生成语义标签,预测辐射学水平中的语义主题并自动生成关键词。
May, 2015
通过深度学习方法,欧州央行会公布最新的 Automatic radiology report generation 的方法,并且总结了该领域内多模态数据获取、数据融合等关键技术的发展,并为进一步研究提供了详尽的信息。
May, 2024
采用半监督学习框架,结合大型语言模型和自编码器,通过对口腔放射病例报告进行注释和无标签数据利用,成功实现了牙科全景放射病例的自动化分类,结果表明该方法在鉴定牙齿相关病症上具有与初级专家相当的准确性。
Jun, 2024
该研究使用深度学习和多标签分类方法设计了一个名为 LesaNet 的病变注释网络,它可以准确的为超过 32k 的多样性病变图像进行分类并提取出 171 个精细标签,平均 AUC 达到 0.9344。
Apr, 2019
利用图像和诊断报告的多模态深度学习在医学影像诊断领域取得了显著进展,尤其在缺乏足够注释信息的辅助诊断方面具有强大的能力,然而,没有详细位置注释的准确定位疾病仍然是一个挑战,现有的方法已尝试利用局部信息实现细粒度语义对齐,但其在提取综合上下文内的细粒度语义能力有限,为解决这一问题,我们提出了一种新的方法,将文本报告中的完整句子作为局部语义对齐的基本单元,我们的方法结合了胸部 X 射线图像和相应的文本报告,在全局和局部层面进行对比学习,我们的方法在多个数据集上取得的领先结果证实了其在病灶定位任务中的有效性。
Jan, 2024
使用深度神经网络进行磁共振成像(MRI)图像的自动语义分割极大地辅助于评估和规划各种临床应用的治疗。然而,训练这些模型要求具备丰富的注释数据来实施端到端的监督学习过程。即使我们注释了足够多的数据,由于患者、MRI 扫描仪和成像协议的差异等因素,MRI 图像显示出相当大的变异性。这种变异性需要针对每个特定的应用领域重新训练神经网络,而这又需要专业放射科医生对所有新领域进行手动注释。为了减少持久数据注释的需求,我们开发了一种使用多个注释源域进行无监督联邦域自适应的方法。我们的方法使得能够将知识从多个注释源域转移,以使模型在未注释的目标域中有效使用。最初,我们通过最小化目标域和源域的分布的成对距离,使得目标域数据与每个源域在潜在嵌入空间中具有相似的表示,该空间被建模为深度编码器的输出。然后,我们采用集成方法来利用从所有领域获得的知识。我们提供了理论分析,并在 MICCAI 2016 多中心数据集上进行实验证明我们的方法是有效的。
Jan, 2024
传统 DICOM 数据管理系统无法处理机器学习算法所需的数据规模和复杂性,本论文介绍了一种创新的数据整理工具,旨在简化大规模医学影像数据集的组织、管理和处理,满足放射科医生和机器学习研究人员的需要,并在 RACOON 下进行集成。
Sep, 2023