一种基于深度学习算法的腹腔镜手术人工智能云辅助系统技术方案

技术编号:32590470 阅读:15 留言:0更新日期:2022-03-09 17:24
本发明专利技术涉及人工智能技术,且公开了一种基于深度学习算法的腹腔镜手术人工智能云辅助系统,包括以下步骤:S1、准备数据,从采集的大量腹腔镜手术视频中,甄选出具有代表性的影像作为训练数据,截取图片并向图片添加标签;S2、对标签数据进行训练,得到用于实时检测手术关键元素的深度学习算法模型;S3、分析模型检测效果,对于漏检测与误检测部分,再次添加标签数据,并反复加强训练;S4、将模型检测精度提升至理想范围,在模型的指引下进行手术,并将数据实时存入云服务器,分析云数据实现系统的优化迭代;本发明专利技术搭载云计算技术,通过数据的实时传输与统一存储分析,实现系统功能的持续优化升级。化升级。化升级。

【技术实现步骤摘要】
一种基于深度学习算法的腹腔镜手术人工智能云辅助系统


[0001]本专利技术涉及人工智能
,尤其涉及一种基于深度学习算法的腹腔镜手术人工智能云辅助系统。
[0002]
技术介绍

[0003]微创外科手术经历了30年的发展,在技术层面已进入高位平台期。曾经作为新兴技术的腹腔镜手术,正在逐渐成为新的“传统手术”。现如今,外科正逐步迈入多学科、多技术结合的新局面,高质量的大型临床研究正不断推出,新的科技和技术理念也在不断的升级迭代。在此背景下,微创外科的重心越来越以实际问题为导向,致力于向数字外科、高科技手术等方面发展。
[0004]依托AI医疗辅助系统,可以在一定程度上改善城乡医疗资源不均衡的问题。
[0005]
技术实现思路

[0006]本专利技术的目的在于将传统腹腔镜设备升级为附带人工智能云辅助系统的数字化腹腔镜设备,提供了一种基于深度学习算法的腹腔镜手术人工智能云辅助系统,解决了现有腹腔镜手术过度依赖外科医生个人判断,并且设备孤立运行,未搭载云计算、物联网等前沿技术的不足。
[0007]本专利技术的目的通过以下技术方案来实现,一种基于深度学习算法的腹腔镜手术人工智能云辅助系统,所述辅助方法包括:步骤一、准备数据,从采集的大量腹腔镜手术视频中,甄选出具有代表性的影像作为训练数据,截取图片并向图片添加标签;步骤二、对标签数据进行训练,得到用于实时检测手术关键元素的深度学习算法模型;步骤三、分析模型检测效果,对于漏检测与误检测部分,再次添加标签数据,并反复加强训练;步骤四、将模型检测精度提升至理想范围,在模型的指引下进行手术,并将数据实时存入云服务器,分析云数据实现系统的优化迭代。
[0008]所述具有代表性的影像包括:非已损坏视频、非手术流程异常视频、非患者器官先天性异位视频。
[0009]所述标签包括:各器官区域标签、推荐入刀区域标签、危险警示区域标签。
[0010]所述添加标签步骤包括:A1、将具有代表性的影像分为病灶切割前、病灶切割中、病灶切割后三个阶段;A2、每阶段选取5000个手术视频,每个视频截取10张图片;
A3、为三个阶段的各50000张图片,分别添加各器官区域标签、推荐入刀区域标签、以及危险警示区域标签。
[0011]所述训练步骤包括:设置好文件路径;数据预处理;安装YOLOR算法依赖项;为YOLOR算法准备预训练的权重;开发出一个过拟合的模型;观察验证集损失从而找到模型最佳训练回合数;重新打乱数据并用最佳回合数训练出最优模型。
[0012]所述手术关键元素包括:各器官实时位置、推荐入刀位置、危险情形预测与警示。
[0013]所述深度学习算法模型包括:图像分类模型、图像分割模型、目标检测模型、关键点检测模型。
[0014]所述云数据包括:手术视频影像、系统实时检测出的各器官位置、系统实时做出的推荐入刀位置、系统做出的危险情形预测与警示、手术发生事故后系统是否已提前做出警示的布尔值组合。
[0015]所述数据预处理步骤包括:灰度化、几何变换、以及图像增强。
[0016]所述布尔值组合包括:B1、手术未发生事故,并且系统未作出危险预警;B2、手术未发生事故,并且系统已做出危险预警;B3、手术发生事故,并且系统未作出危险预警;B4、手术发生事故,并且系统已做出危险预警。
[0017]本申请具有以下有益效果:1. 本专利技术通过大量临床手术数据,以及在专家指导下完成的各器官区域标签、推荐入刀区域标签、危险警示区域标签,训练出具有实时检测手术关键元素的深度学习算法模型,辅助医生在手术中进行更准确的判断,并且在危险发生之前便做出预测与警示,降低腹腔镜手术事故的发生。
[0018]2. 本专利技术将手术数据、系统实时检测数据、系统实时推荐数据、系统危险警示数据、事故发生前系统是否已提前预警,上传至云服务器,通过对漏检测情形与误检测情形的不断分析,持续优化系统辅助效果。
[0019]3. 在本专利技术的辅助下进行腹腔镜手术,可以实时获得专家级的推荐入刀指引与危险前置警示。
[0020]4. 本专利技术可以用于医疗教育,帮助年轻外科医生在职业初期,就能获得专家级医师的指导,并养成良好的手术操作习惯。
[0021]5. 本专利技术可实现与创新医疗器械的嵌入式结合,凭借不断积累的云数据,推动新型数字医疗手术器械的发展。
[0022]附图说明
[0023]图1为本专利技术的整体流程示意图。
[0024]图2为数据标注流程示意图。
[0025]图3为模型训练流程示意图。
[0026]图4为YOLOR算法模型结构示意图。
[0027]图5为YOLOR算法与其它目标检测算法的对比。
[0028]图6为系统的云功能示意图。
[0029]具体实施方式
[0030]为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,以下结合附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的保护范围,而是仅仅表示本申请的选 定实施例。基于本申请的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。下面结合附图对本专利技术做进一步的描述。
[0031]如图1所示,本专利技术涉及一种基于深度学习算法的腹腔镜手术人工智能云辅助系统,其具体数据准备与数据标注方式,如图2所示:采集超过5000例腹腔镜手术视频,剔除其中已损坏的视频、手术流程因人为因素导致异常的视频、患者器官先天性异位视频。然后将所有剩余视频按手术阶段分为前期、中期、后期三种类型。紧接着,在所有手术前期视频中随机选取5000个样本,在所有手术中期视频中也随机选取5000个样本,同样的,在所有手术后期视频中也随机选取5000个样本。接下来,在每个样本中截取10张图片,从而获得每阶段50000张,共计150000张图片。最后,在专家医师的指导下,为这些图片分别添加各器官区域标签、推荐入刀区域标签、以及危险警示区域标签。
[0032]如图3所示,其具体训练方式为:设置好文件路径;对数据依次进行灰度化、几何变换、以及图像增强;安装YOLOR算法依赖项;为YOLOR算法准备预训练的权重;开发出一个过拟合的模型;观察验证集损失从而找到模型最佳训练回合数;重新打乱数据并用最佳回合数训练出最优模型。
[0033]如图4所示,YOLOR算法创新性的提出了显性知识与隐性知识的概念,通过拓展目标函数中误差项的不同构成,模型可学习到更深层次的数据细节,从而获得更好的预测表现。
[0034]上式为传统网络训练的目标函数,其中是观察值, 是神经网络的参数集, 表示神经网络的操作, 是误差项, 是给定任务的目标。训练的过程,便是尽可能最小化 ,使得
ꢀꢀ
...

【技术保护点】

【技术特征摘要】
1.一种基于深度学习算法的腹腔镜手术人工智能云辅助系统,其特征在于:所述系统包括的辅助方法为:步骤一、准备数据,从采集的大量腹腔镜手术视频中,甄选出具有代表性的影像作为训练数据,截取图片并向图片添加标签;步骤二、对标签数据进行训练,得到用于实时检测手术关键元素的深度学习算法模型;步骤三、分析模型检测效果,对于漏检测与误检测部分,再次添加标签数据,并反复加强训练;步骤四、将模型检测精度提升至理想范围,在模型的指引下进行手术,并将数据实时存入云服务器,分析云数据实现系统的优化迭代。2.根据权利要求1所述的一种基于深度学习算法的腹腔镜手术人工智能云辅助系统,其特征在于:所述具有代表性的影像包括:非已损坏视频、非手术流程异常视频、非患者器官先天性异位视频。3.根据权利要求1所述的一种基于深度学习算法的腹腔镜手术人工智能云辅助系统,其特征在于:所述标签包括:各器官区域标签、推荐入刀区域标签、危险警示区域标签。4.根据权利要求1所述的一种基于深度学习算法的腹腔镜手术人工智能云辅助系统,其特征在于:所述添加标签步骤包括:A1、将具有代表性的影像分为病灶切割前、病灶切割中、病灶切割后三个阶段;A2、每阶段选取5000个手术视频,每个视频截取10张图片;A3、为三个阶段的各50000张图片,分别添加各器官区域标签、推荐入刀区域标签、以及危险警示区域标签。5.根据权利要求2所述的一种基于深度学习算法的腹腔镜手术人工智能云辅助系统,其特征在于:所述训练步...

【专利技术属性】
技术研发人员:武正浩马玉丹武其春张今马宏索亮韩雪妃谷越刘明雷刘文哲蔡宇晴高艳张哲
申请(专利权)人:北京数智元宇人工智能科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1