多尺度注意力多实例学习用于多千兆像素组织学图像分类
我们提出了一种基于 Transformer 的多例学习方法,用区域视觉 Transformer 自注意机制替代传统的学习注意机制,通过融合区域块信息来预测整张幻灯片,并展示了如何在不同距离级别上分层处理特征。为了提高预测准确性,尤其是对于具有小区域形态特征的数据集,我们介绍了一种在推断期间将图像处理集中于高注意区域的方法。我们的方法能够显著提高两个组织病理学数据集上的性能,并指出了进一步研究的有希望的方向。
Aug, 2023
本研究提出了一种基于两阶段半监督学习的方法,将自监督特征学习和正则化的注意力弱标注多实例学习相结合,应用于乳腺癌病理图片二分类任务,并通过五个随机数据集实现了当前最先进的分类性能。
Oct, 2019
本文提出了一种基于注意力机制的多实例学习模型,用于幻灯片级别癌症分级和弱监督区域兴趣检测,并在前列腺癌中进行了实验,其利用可视化显著性图来选择信息瓷砖,提高了细粒度等级分类的性能。
May, 2019
该研究使用大规模的有标签数据集训练深度学习模型结合 “多示例学习”,以在针生物镜下进行前列腺癌诊断,并获得了很高的 AUC,为计算病理学领域的决策支持系统部署提供了基础。
May, 2018
本研究提出了使用分位数函数汇聚图像小区域预测结果的多实例学习方法,以及在随机裁剪区域上应用多实例聚合的图像增强方法,该方法在乳腺肿瘤组织分类中进行了五种不同任务的验证,并提供了一种可视化方法以解释局部图像分类,这可能有助于对肿瘤异质性的未来洞见。
Jun, 2018
提出了一个全局利用 WSI 的 Hierarchical Attention-Guided Multiple Instance Learning 框架,该框架动态地、全面地发现了 WSIs 的多个分辨率上的显著区域,同时使用 Integrated Attention Transformer(由多个 Integrated Attention Modules 组成)进一步提高了 transformer 的性能,实验表明,该方法在多个数据集上取得了最先进的表现。
Jan, 2023
通过引入附加的解码器头部使用独立的加权损失函数,该研究提出了对数字组织学中核的同时实例分割和分类的多阶段方法,以在高质量实例分割和核分类方面取得了显著的性能改进,并且在 19 种类型的组织上具有广泛的适用性和较低的复杂性。
Aug, 2023
我们提出了一种基于卷积神经网络的多类组织分割模型,通过像素对齐的非线性融合实现了局部和全局视野,能够准确检测各种组织类别,并且对于多种染料和扫描仪具有稳定性。
Jun, 2024
该研究使用多个特征提取器和聚合器,通过对脑瘤组织病理学进行多实例学习实验,为精确诊断和个体化治疗策略提供了更新的性能基准,包括在印度人群中的新数据集 (IPD-Brain) 。利用经过组织病理学数据预训练的 ResNet-50 进行特征提取,并结合 DTFD 特征聚合器,该方法在三种脑胶质瘤亚型分类上分别在 IPD-Brain 和 TCGA-Brain 数据集上取得了 88.08 和 95.81 的 AUC 值。此外,该研究通过 H&E 染色全切片图像在 IPD-Brain 数据集上建立了基于分级和检测 IHC 分子生物标记物(IDH1(突变 R132H),TP53,ATRX,Ki-67)的新基准,并突出了模型决策过程与病理学家诊断推理之间的显著相关性,强调了其模拟专业诊断程序的能力。
Feb, 2024
本研究提出了一种基于深度卷积神经网络和注意力机制的多示例学习方法,旨在对整个组织切片图像进行分析并发现对诊断具有关键意义的细胞区块,并在结直肠和乳腺癌病理数据上取得了最先进的表现。
Jun, 2019