Aug, 2023

SurGNN:使用图神经网络解释性视觉场景理解与外科技能评估

TL;DR该论文研究了图神经网络如何增强视觉场景理解和手术技能评估,通过使用图神经网络分析以图形结构表示的手术过程的复杂视觉数据,可以提取相关特征并预测手术技能。此外,图神经网络提供可解释的结果,揭示了对预测技能指标有贡献的具体行动、仪器或解剖结构,这对于手术教育者和学员非常有益,因为它提供了成功手术表现和结果的重要见解。SurGNN 提出了两种并行的方法 - 一种是有监督的,另一种是自监督的。文中还简要讨论了其他自动化手术技能评估技术,并强调手工设计特征在捕捉手术专长的细微差别方面的局限性。我们使用所提出的方法在 EndoVis19 和自定义数据集上达到了最先进的结果。代码的工作实现可以在此 https URL 找到。