一种基于手术行为理解的内镜控制方法、装置及存储介质制造方法及图纸

本说明书实施例提供一种基于手术行为理解的内镜控制方法、装置及存储介质，可应用与人工智能技术领域。所述方法包括：获取内镜拍摄的手术视频；检测所述手术视频中的分析对象；基于分析对象之间的交互关系确定对应于手术视频的手术行为类型；所述手术行为类型对应有预设的内镜状态参数；根据所述手术行为类型所对应的内镜状态参数对所述内镜进行控制。通过上述方法，实现了内镜控制的自动性，保证了内镜拍摄视频符合当前手术的需求，减轻了医生在手术执行过程中的压力，改善了手术的执行效果。果。果。

【技术实现步骤摘要】
一种基于手术行为理解的内镜控制方法、装置及存储介质


[0001]本说明书实施例涉及人工智能
，特别涉及一种基于手术行为理解的内镜控制方法、装置及存储介质。

技术介绍

[0002]腔镜手术是一种新兴的手术方式，在患者的手术部位的体表做若干个小切口后，通过这些小切口将内镜和手术器械送入患者体内。内镜上所设置的微型摄像头可以拍摄手术部位和手术器械的图像后，并将拍摄图像实时展示在显示设备上，以视频的形式供医生观察并执行具体的手术过程。
[0003]随着手术的进行，医生往往需要手动调整内镜来适应手术需求，例如从内镜的方向、位置、视野、角度、亮度、焦距等方面对内镜进行控制。但是，在手术过程中医生主要集中于利用手术器械完成相应的手术操作，在手术过程中额外分摊注意力来操控内镜会增加医生工作量，进而延长手术时间，严重时可能会影响手术的执行效果。因此，目前亟需一种在手术过程中针对相应需求能够自动对内镜进行控制调节的技术方案。

技术实现思路

[0004]本说明书实施例的目的是提供一种基于手术行为理解的内镜控制方法、装置及存储介质，以解决本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于手术行为理解的内镜控制方法，其特征在于，包括：获取内镜拍摄的手术视频；检测所述手术视频中的分析对象；基于分析对象之间的交互关系确定对应于手术视频的手术行为类型；所述手术行为类型对应有预设的内镜状态参数；根据所述手术行为类型所对应的内镜状态参数对所述内镜进行控制。2.如权利要求1所述的基于手术行为理解的内镜控制方法，其特征在于，所述检测所述手术视频中的分析对象，包括：基于最大值矩阵/平均值矩阵从所述手术视频的视频帧中提取视频特征图；从所述视频特征图中提取形状特征和/或颜色特征；利用所述形状特征和/或颜色特征确定候选对象和对应的置信度；根据置信度从所述候选对象中选取分析对象。3.如权利要求1所述的基于手术行为理解的内镜控制方法，其特征在于，所述分析对象包括病灶区域、患者器官/组织、手术器械中的至少一种。4.如权利要求1所述的基于手术行为理解的内镜控制方法，其特征在于，所述基于分析对象确定对应于手术视频的手术行为类型，包括：根据分析对象提取手术视频中的背景上下文信息；所述背景上下文信息用于描述手术视频中的背景区域；获取分析对象的对象参数；所述对象参数包括所述分析对象的位置、大小、类别中的至少一种；结合所述背景上下文信息和对象参数确定分析对象之间的关联关系；基于所述关联关系确定手术行为类型。5.如权利要求4所述的基于手术行为理解的内镜控制方法，其特征在于，所述根据分析对象提取手术视频中的背景上下文信息，包括：结合分析对象在手术视频中确定背景区域；提取背景区域的背景特征作为背景上下文信息；所述背景特征包括颜色特征、形状特征、场景特征中的至少一种。6.如权利要求4所述的基于手术行为理解的内镜控制方法，其特征在于，所述结合所述背景上下文信息和对象参数确定分析对象之间的关联关系，包括：获取分析对象之间的多个随机分组；结合所述背景上下文信息和对象参数确定各个随机分组中的分析对象之间的关联程度；提取关联程度大于关联程度阈值的随机分组，利用递归神经网络确定分析对象之间的关联关系。7.如权利要求4所述的基于手术行为理解的内镜控制方法，其特征在于，所述基于所述关联关系确定手术行为类型，包括：确定手术视频所对应的空间序列特征和时间序列特征；综合所述空间序列特征和时间序列特征，利用关联关系确定手术行为类型。8.如权利要求1所述的基于手术行为理解的内镜控制方法，其特征在于，所述根据所述
手术行为类型...

【专利技术属性】
技术研发人员：请求不公布姓名，
申请(专利权)人：上海微创医疗机器人集团股份有限公司，
类型：发明
国别省市：