May, 2024

基于注意力机制的头颈部临床图像预癌病变鉴定管道

TL;DR癌症的早期检测可以通过早期干预来改善患者的预后。我们提出了一种基于注意力机制的流水线,可以识别疑似病变、对其进行分割,并对其进行非异型、异型和癌性病变的分类。我们提出了一种基于视觉变换器的掩码 R-CNN 网络用于临床图像的病变检测和分割,以及基于多实例学习的分类方案。目前的结果显示,分割模型可以在未见的外部测试数据上产生具有高达 82% 重叠准确度的分割掩码和边界框,并超过了经过验证的分割基准。在内部队列测试集上,分类 F1 得分达到 85%。我们开发了一款应用程序,可以通过智能设备进行病变分割。未来的工作将利用内窥镜视频数据进行精确的早期检测和预后评估。