从稀疏标注的 3D 医学图像数据集进行迁移学习
本研究评估比较不同的训练神经网络技术,提出为小型数据集提高模型准确度的方法,并发现迁移学习对于重复利用以前学习的特征有重要作用,特别是在医学图像应用中。
Dec, 2019
本研究为培训深度学习算法所需数据量的问题提出了一种解决方案,通过建立医学图像分割数据集和使用 Med3D 进行多域协同训练,可以加速涉及 3D 医学图像的任务的训练收敛速度和提高准确度。
Apr, 2019
本论文介绍了一种将自然图像上训练的 2D 分类网络的效率转移到 2D、3D 单模态和多模态医学图像分割应用中的高效方法,该方法基于权重转移和维度转移的两个关键原则,实验证明其在多维医学图像分割方面表现出色。
Jul, 2023
通过研究 Kolesnikov 等人介绍的大规模预训练网络在胸部放射学、乳腺 X 线检查和皮肤科中的转移表现以及其在医学领域中的重要特性,我们发现,将自然图像转移到医学图像中是非常有效的,但只有在足够大的规模下才能实现。
Jan, 2021
本文探讨了用自然图像数据集(ImageNet)通过标准大型模型和预训练权重进行迁移学习在深度学习医学成像应用中的方法。然而,此方法在自然图像分类和目标医学任务之间存在根本差异,并且人们对迁移效果的了解甚少。该研究表明,在两项大规模医学成像任务的性能评估中,迁移学习对性能的提升有限,而简单轻量级模型可以与 ImageNet 架构相当。此外,还探讨了迁移的权重尺度的独立特性,并阐述了对更高效的模型探索的意义。
Feb, 2019
本研究系统研究了将在 ImageNet 数据上训练的卷积神经网络 (CNN) 在超声图像肾脏检测问题上进行转移学习的过程,并表明通过转移学习可以获得更好的性能。
Apr, 2017
针对医学影像和机器学习领域的一个主要挑战是如何有效地将预训练模型适应于专门的医学背景。本研究对应用于 X 光、MRI、组织学、皮肤镜检和内窥镜手术等不同医学影像领域的多种微调方法在预训练模型上的性能进行了全面的分析。结果显示,结合线性探测和全面微调等策略在 50% 以上的情况下能够明显提高性能,动态调整学习率的自动 RGN 方法在特定模态下能够提高 11% 的性能。此外,与传统的全面微调相比,DenseNet 结构对替代的微调方法表现出更为显著的优势。本研究不仅为优化医学影像分析中的预训练模型提供了有价值的洞见,而且建议未来研究可以探索更先进的架构和微调方法。
Jun, 2024
通过对比自然图像与医学图像,本论文通过大规模评估了不同图像预训练模型在医学图像分析领域的可迁移性,提出了将自然图像模型迁移到医学图像中的实用方法,并发现新的关键性能:针对医学分割任务 fine-grained 数据预训练模型具有独特的局部特征表示,自我监督的 ImageNet 模型比有监督的 ImageNet 更有效地学习整体特征,连续预训练可以缩小自然图像与医学图像领域之间的跨度,有望引导深度学习在医学图像领域的未来研究。
Aug, 2021
本研究提供了基于深度学习的医学体积分割方法,既可以从头开始训练模型,也可以遵循标准的 “预训练,然后微调” 方法。本研究首次提出了一种名为 Med-Tuning 的新框架,基于内部阶段特征增强和阶段间特征交互,实现了医学级体积分割的参数高效转移学习,可在减少调整参数成本的情况下实现比以前最先进的参数高效转移学习方法和完全微调更好的分割效果。
Apr, 2023
通过对几个医学图像基准数据集的一系列实验,我们探讨了迁移学习、数据大小、模型能力和归纳偏差以及源域与目标域之间的距离之间的关系,并发现特征重用在其中扮演着重要的角色。
Mar, 2022