从叉子到鹰嘴钳:一种新的外科手术器械实例分割框架
本文基于深度学习技术,提出一种轻量级单阶段实例分割模型结合卷积块关注模块的方案,通过数据增强和最优锚定策略进一步提高准确性,实现了对手术器械的实时跟踪和分割,并在 ROBUST-MIS 挑战中取得了 44% 以上的优异表现。
Nov, 2021
通过仅使用二进制工具遮罩以及机器人辅助手术中的二进制工具存在标签,我们开发了一个无需空间注释的实例分割框架,该框架能从单帧中提取个体工具实例并进行语义特征编码,使得只需以人类操作员进行工具类别标记的方式便能有效训练工具实例分类器。通过验证我们的框架在 EndoVis 2017 和 2018 分割数据集上,我们发现与几种最先进的全监督分割方法相比,通过手动注释或基于无监督二进制分割模型的预测获得的二进制遮罩的实例分割方法无需空间注释且性能更优。
Sep, 2023
该研究描述了他们在 MICCAI 2017 内窥镜视觉子挑战赛中赢得的机器人工具分割选手冠军的解决方案,该解决方案通过使用几种新颖的深度神经网络架构获得了比现有技术更好的结果来解决机器人手术中的工具语义分割问题。
Mar, 2018
该综述文章着重介绍了目前基于纯视觉的、不附加任何标记的单帧和带有时间信息的最小侵入性手术图像中手术工具分割和跟踪方法,重点关注深度学习方法和公开数据集的使用,讨论了存在的不足之处和未来发展的潜能。
Apr, 2023
SurgicalSAM 是一种针对显著改善 SAM 泛化性能的新型端到端高效调优方法,引入了轻量级基于原型的类提示编码器,并提出了对比原型学习以进一步增强类原型的区分力,通过在 EndoVis2018 和 EndoVis2017 数据集上进行广泛实验,证明其达到了最先进的性能,仅需要少量可调参数。
Aug, 2023
该研究旨在通过利用机器学习模型,使用手术器械的安装数据作为弱标签,实现对内窥镜视频中的手术器械进行跟踪和定位。SurgToolLoc 2022 挑战赛的结果表明,通过自动检测和跟踪手术器械,既可以提高手术效率和运营,又可以为机器学习和手术数据科学的更广泛应用提供支持。
May, 2023
通过应用共现损失并使用图像级别标签,以便快速且高效地检测手术工具,我们提出了一种在大规模图像数据集上实现手术工具检测的方法,并在 Endovis2018 数据集上的实验证明了其有效性。
Jan, 2024
研究通过开发 Surgical-DeSAM 方法,利用 Bounding Box 提示和实时机器人手术,实现了实时仪器分割,并在 MICCAI 手术仪器分割挑战 EndoVis 2017 和 2018 数据集上显著改进仪器分割方法的性能。
Apr, 2024
利用深度学习,将 2D 的手术工具姿态估计重构为热力图回归,与分割同时进行。实验证明,该方法可以显著提高性能,超越现有技术在 Retinal Microsurgery 和 MICCAI EndoVis Challenge 2015 的表现。
Mar, 2017
本文介绍了一项比较研究,探讨了在机器人以及传统腹腔镜手术中,基于视觉的不同方法用于器械分割和追踪的效果。研究表明,现代的深度学习方法在器械分割任务中表现优异,但结果还不完美。此外,合并不同方法的结果实际上显著提高了准确性。与此同时,器械追踪任务的结果表明,在传统腹腔镜手术中这仍然是一个待解决的挑战。
May, 2018