基于空间感知 Transformer-GRU 框架的增强型青光眼诊断从 3D OCT 成像
本研究基于 Spectralis OCT 提取 3D ONH 点云并采用 PointNet 和 DGCNN 两种几何深度学习技术用于诊断青光眼和分析 3D 结构特征,其诊断精确度均优秀,且能确定有助于诊断的关键结构特征。因此,该方法具有诊断各种眼科疾病的潜在临床应用前景。
Apr, 2022
青光眼预测的研究引入了基于变压器架构的多尺度时空变换网络 (MST-former),针对时序图像输入进行了特定设计,可以在时空维度上有效地学习图像的语义信息;在不规则采样数据方面,引入了时间距离矩阵来非线性地缩放时间注意力;此外,通过温度控制的平衡 Softmax 交叉熵损失函数解决了类别不平衡问题。实验结果表明,MST-former 方法在青光眼预测方面表现出卓越的优势,AUC 值达到 98.6%;在阿尔茨海默病神经成像倡议 (MRI) 数据集上,对轻度认知损害和阿尔茨海默病的预测准确率为 90.3%,明显优于对比方法。
Feb, 2024
本文提出了一种新的分割方法 UT-Net,结合了 U-Net 和 transformer,采用注意力机制,提高了对视网膜图像中视盘和视杯的分割准确度,并在三个数据集上验证了其优越性。
Mar, 2023
该研究使用光学相干断层扫描血管造影技术(OCTA)对糖尿病视网膜病变进行自动评估,通过优化的二维摘要和分类流程,提供了比三维分类更好、更易解释的结果。
Jan, 2024
该研究通过调查最近的研究,使用眼底图像、光学相干断层扫描和视野图像等方法基于人工智能的青光眼诊断,特别关注利用深度学习的方法。研究提供了最新的分类法,并包含可用源代码的链接,以提高研究方法的可重复性。通过对广泛使用的公共数据集进行严格的基准测试,揭示了在普适性、不确定性估计和多模态集成方面的性能差距。此外,调查展示了关键数据集和限制,如规模、标签不一致性和偏见。我们描述了未来研究的开放性挑战并详细阐述了有前景的方向。此调查旨在对希望将进展转化为实践的人工智能研究人员以及希望利用最新人工智能成果改善临床工作流程和诊断的眼科医生有所帮助。
Jul, 2023
青光眼是全球不可逆盲的主要原因。本研究针对有限的带有最先进的光学相干断层扫描(OCT)3D 视网膜成像数据的标记患者的瓶颈问题,提出两种解决方案。首先,我们开发了一种新型的广义增强半监督学习(SSL)模型,称为伪监督器,以最佳方式利用无标签数据。与最先进的模型相比,所提出的伪监督器通过预测未标记样本的伪标签来优化策略,以提高经验概括能力。我们的伪监督器模型通过进行青光眼检测和进展预测两个临床任务进行评估。进展预测任务以单模态和多模态方式进行评估。我们的伪监督者模型表现出优于最先进 SSL 比较模型的性能。此外,我们的模型在公开可用的 LAG 眼底数据集上也取得了最佳结果。其次,我们引入了哈佛青光眼检测和进展(Harvard-GDP)数据集,这是一个多模态多任务数据集,包括来自 1,000 例患者的 OCT 成像数据,以及青光眼检测和进展的标签。这是一个拥有 3D OCT 成像数据的最大的青光眼检测数据集,也是公开可用的第一个青光眼进展预测数据集。我们提供了详细的性别和种族分析,供有兴趣的研究人员用于公平学习研究。我们的数据集通过几个最先进的有监督的 CNN 和 Transformer 深度学习模型进行了基准测试。数据集和代码可通过 https://ophai.hms.harvard.edu/datasets/harvard-gdp1000 公开获取。
Aug, 2023
提出基于深度学习的神经网络来校正 OCT 图像中的运动伪影,并在实验中表明该方法可以有效地校正运动伪影,恢复视网膜的整体曲率,并能够推广到各种疾病和分辨率。
May, 2023
通过图像处理和深度学习神经网络分类相结合的方法,提出了一种先进的图像预处理技术来诊断青光眼。他们的 Glaucoma Automated Retinal Detection Network(GARDNet)在 Rotterdam EyePACS AIROGS 数据集上成功测试,AUC 为 0.92,在 RIM-ONE DL 数据集上进行了额外优化和测试,AUC 为 0.9308,表现优于现有技术。
May, 2022
光学相干断层扫描(OCT)通过提高形态结构解析能力,利用深度学习技术实现了基于医学图像的诊断与治疗。为了克服现有深度学习方法在图像重建中的频率偏差问题,本文提出了一种结合频率感知超分辨率框架,通过集成三个关键的基于频率的模块(频率变换、频率跳跃连接和频率对齐)及频率损失函数到条件生成对抗网络(cGAN)的方法。通过对一个现有的冠状动脉 OCT 数据集进行大规模定量研究,证明了我们提出的框架优于现有的深度学习框架。此外,我们还将该框架应用于鱼角膜图像和大鼠视网膜图像,证明了它在眼科成像中对解析形态细节的能力。
Jul, 2023