条文本
来自Altmetric.com的统计
消息
在本课题组前人对可见Barrett食道癌(BE)图像人工标注工作的基础上,开发了实时深度学习人工智能(AI)系统。当内窥镜专家对BE进行内窥镜评估时,我们的AI系统从实时摄像机直播中捕获随机图像,并提供全局预测(分类),以及精确区分正常BE和早期食管腺癌(EAC)的密集预测(分割)。该系统对14例肿瘤性BE的诊断准确率为89.9%。
更详细地
本文是我们之前发表的关于人工智能和深度学习在BE评估中的应用的论文的后续。1 2在我们最初的出版物中,我们开发了一个计算机辅助诊断(CAD)模型,并在BE评估期间在分类和分割领域展示了有前途的性能分数。1 2然而,这些结果是在最佳内窥镜图像上获得的,这可能不能充分反映现实情况。为了将基于人工智能的图像分类无缝集成到临床工作流程中,我们进一步开发了先前的系统,以提高分类图像分析的速度和显示癌症概率空间分布的彩色编码密集预测的分辨率。1 2基于DeepLab V.3+的深度卷积神经网络(CNNs)和残差网(ResNet)架构,采用了最先进的编码器-解码器网络。3.为了将内窥镜直播传输到我们的AI系统,将一个捕获卡(台湾Avermedia)插入到内窥镜监视器。
在线补充视频1展示了奥格斯堡大学医院内窥镜室中基于人工智能的BE评估的设置(图1).人工智能预测可以在任何时候使用键盘上的按钮或脚踏开关启动。视频片段展示了三个不同病人的例子和人工智能在不同位置的预测。注意,图像冻结不是人工智能分析的必要条件,这是由系统随机完成的,但为了本研究的评估目的而进行的,以确保人类和人工智能预测的基础相同。可以看到,屏幕底部的一个动态蓝色条实时提供了癌症概率的连续预测。根据我们之前的AI系统,2如果一幅图像的全球癌症预测超过90%,则被归类为EAC。
在线补充视频2显示用户界面(UI)和应用程序功能。UI的左边部分包括一个内镜检查(或可选的视频)的实时预览窗口和被检查的患者列表。主窗口显示基于概率的密度预测。屏幕底部的动态蓝条显示实时部分预测。提供了三种不同的可视化结果:巴雷特视图,癌症视图和组合视图。此外,特定区域的癌症全球预测显示在UI下方的一个蓝色粗条中。最后,在线补充视频2简要介绍了用于全局和密集预测的人工智能方法(图2).该方法基于DeepLab V.3+,一种编码器-解码器人工神经网络。3.与我们以前的CAD系统类似,2编码器是imagenet预训练的,基于101层的ResNet。它逐层降低特征图的空间分辨率,学习更高抽象层次的语义信息。最后一个ResNet层使用了扩展卷积的概念,然后是空间金字塔池,以便将更大的上下文集成到分类中。3.对于全局预测,两个完全连接的层被链接到编码器路径。4对于密集预测,解码器使用编码器的语义信息并将其分布到全空间分辨率。因此,编码器神经网络用于分类(全局预测)和分割(密集预测)。
在我们目前的研究中,AI系统使用来自奥格斯堡大学医院图像数据库的共129张内窥镜图像进行训练。为了实时验证该系统,我们对14名患者(4名女性和10名男性)的额外图像(36张早期EAC图像和26张正常BE图像)进行了评估,同时由一位BE内窥镜专家进行内窥镜检查。所有图像均通过切除标本的病理检查(EAC)和钳活检(正常BE)进行验证。该AI系统在分类任务中表现优异,灵敏度和特异性分别为83.7%和100.0%,总体准确率为89.9%。
在网上找到更多关于方法和结果的细节。
评论
EAC在西方世界的发病率仍在上升,总体预后仍然较差。5BE是发生EAC最重要的危险因素,尤其是长节段BE和上皮内瘤变患者。6早期发现EAC可显著改善预后;然而,即使对于经验丰富的内窥镜医生来说,BE中早期EAC的内窥镜检测和随后的特征描述也是一个挑战。早期EAC通常是扁平的,很难与周围非发育不良的巴雷特黏膜区分开,即使使用高清内窥镜。7由国际Barrett专家组成的Bing研究小组在诊断高级别瘤变和粘膜癌时的灵敏度和特异性分别为80%和89%。8在BE评估方面经验不足的内窥镜医师可能会获得较低的绩效值。因此,对BE中早期EAC的更有效的检测和表征方法的需求,导致了AI和CAD领域的密集研究,特别是与深度神经网络。
据我们所知,这是深度学习AI系统首次在现实环境中实时应用于BE早期EAC的评估和诊断。视频演示展示了专家和非专家内窥镜医生在BE评估过程中遇到的困难。由于AI系统与经验丰富的内窥镜医师相比表现出非常相似的性能(AI系统与专家仅在一个检查区域存在分歧),基于AI的CAD具有提高BE评估质量的潜力,特别是对于非专业内窥镜医师。本研究的局限性包括纳入的患者数量较少。此外,由内窥镜医生的主观印象所描绘的升高病变也包括在我们的初步研究中。然而,进一步优化与评估将随之而来。
脚注
AE和RM贡献相当。
贡献者AE:研究概念和设计,稿件的起草,数据的分析和解释,以及稿件的关键修改。RM:研究概念和设计,软件实现,手稿的起草,数据的分析和解释,以及对手稿的批判性修改。AP:研究的概念和设计,数据的获取,手稿的起草,手稿的批判性修改和研究监督。FP:研究概念和设计,数据的获取和稿件的关键修订。LdS:对稿件进行统计分析和批判性修改。JP:统计分析,批判性修改稿件和研究监督。CP:研究概念和设计、稿件起草、数据分析和解释、统计分析、稿件批判性修改、行政和技术支持、研究监督。HM:研究的概念和设计,数据的获取,稿件的起草,稿件的关键修改,行政和技术支持,研究监督。AE和RM贡献相当。
资金该项目得到巴伐利亚州科学和艺术部的支持(支持应用科学大学和巴伐利亚学术论坛的应用研究和发展方案- "健康研究"博士联盟)。
相互竞争的利益没有宣布。
病人同意发表不是必需的。
来源和同行评审不是委托;内部同行评议。