基于3D成像的内镜图像观测方法及系统技术方案

本发明专利技术提供了一种基于3D成像的内镜图像观测方法及系统，涉及图像处理技术领域，方法包括：将采集待进行内镜图像观测的目标用户的眼间距信息以及通过内镜端获得目标距离和目标角度，输入至构建3D成像参数处理通道嵌入于处理模块内包括辐辏分析分支和成像角度分析分支，分别获得成像辐辏角、左成像角度和右成像角度，构建3D成像生成通道嵌入于处理模块内包括图像分割分支、背景生成子通道和组织生成子通道，将目标二维图像输入图像分割分支，获得3D观测图像进行观测，本发明专利技术解决了现有技术在进行内镜图像观测的过程中缺乏结合医生眼距数据，导致3D成像准确性差、观测效果差的技术问题，实现了提高3D成像准确性和观测效果的技术效果。技术效果。技术效果。

【技术实现步骤摘要】
基于3D成像的内镜图像观测方法及系统


[0001]本专利技术涉及图像处理
，具体涉及一种基于3D成像的内镜图像观测方法及系统。

技术介绍

[0002]内窥镜检查作为常用的检查手段，能够使得医师更加直观看观察到人体内部环境的真实状态，在医疗领域被广泛用于息肉病变、癌症的检测，以使得患者能够在疾病初期得到有效的干预和治疗。
[0003]目前的内窥镜一般只能观测二维图像，也有部分通过图像处理技术通过二维图像重建三维图像，进行观测，三维图像能够使医生观测产生景深感，提升内镜检测的准确性，而如今现有技术在进行内镜图像观测的过程中缺乏结合医生眼距数据，导致观测时的3D成像准确性低、观测效果差的技术问题。

技术实现思路

[0004]本申请提供了一种基于3D成像的内镜图像观测方法及系统，用于针对解决现有技术中存在的在进行内镜图像观测的过程中缺乏结合医生眼距数据，导致观测时的3D成像准确性低、观测效果差的技术问题。
[0005]鉴于上述问题，本申请提供了一种基于3D成像的内镜图像观测方法及系统。
[0006]第一方面，本申请提供了一种基于3D成像的内镜图像观测方法，所述方法包括：采集待进行内镜图像观测的目标用户的眼间距信息；通过所述内镜端，采集包括待进行观察的目标组织图像的目标二维图像，并根据所述目标二维图像，分析所述内镜端与所述目标组织的距离和角度，获得目标距离和目标角度；构建3D成像参数处理通道，嵌入于所述处理模块内，所述3D成像参数处理通道包括辐辏分析分支和成像角度分析分支；将所述眼间距信息、目标距离和目标角度输入所述3D成像参数处理通道内的辐辏分析分支，进行成像辐辏分析处理，获得成像辐辏角，将所述眼间距信息、目标距离和所述目标角度输入所述成像角度分析分支，进行成像角度分析，获得左成像角度和右成像角度；构建3D成像生成通道，嵌入于所述处理模块内，所述3D成像生成通道包括图像分割分支、背景生成子通道和组织生成子通道，所述背景生成子通道侧向连接所述组织生成子通道，且所述组织生成子通道内的计算资源大于所述背景生成子通道内的计算资源；将所述目标二维图像输入所述图像分割分支，获取背景二维图像和组织二维图像，将所述背景二维图像与组织二分图像分别结合成像辐辏角、左成像角度和右成像角度输入所述背景生成子通道和组织生成子通道，获得左背景图像、右背景图像、左组织图像和右组织图像；对所述左背景图像和左组织图像，以及右背景图像和右组织图像进行融合处理，获得3D观测图像，进行观测。
[0007]第二方面，本申请提供了一种基于3D成像的内镜图像观测系统，所述系统包括：内镜图像观测模块，所述内镜图像观测模块用于采集待进行内镜图像观测的目标用户的眼间距信息；分析模块，所述分析模块用于通过所述内镜端，采集包括待进行观察的目标组织图
像的目标二维图像，并根据所述目标二维图像，分析所述内镜端与所述目标组织的距离和角度，获得目标距离和目标角度；第一嵌入模块，所述第一嵌入模块用于构建3D成像参数处理通道，嵌入于所述处理模块内，所述3D成像参数处理通道包括辐辏分析分支和成像角度分析分支；成像辐辏分析模块，所述成像辐辏分析模块用于将所述眼间距信息、目标距离和目标角度输入所述3D成像参数处理通道内的辐辏分析分支，进行成像辐辏分析处理，获得成像辐辏角，将所述眼间距信息、目标距离和所述目标角度输入所述成像角度分析分支，进行成像角度分析，获得左成像角度和右成像角度；第二嵌入模块，所述第二嵌入模块用于构建3D成像生成通道，嵌入于所述处理模块内，所述3D成像生成通道包括图像分割分支、背景生成子通道和组织生成子通道，所述背景生成子通道侧向连接所述组织生成子通道，且所述组织生成子通道内的计算资源大于所述背景生成子通道内的计算资源；第一输入模块，所述第一输入模块用于将所述目标二维图像输入所述图像分割分支，获取背景二维图像和组织二维图像，将所述背景二维图像与组织二分图像分别结合成像辐辏角、左成像角度和右成像角度输入所述背景生成子通道和组织生成子通道，获得左背景图像、右背景图像、左组织图像和右组织图像；融合处理模块，所述融合处理模块用于对所述左背景图像和左组织图像，以及右背景图像和右组织图像进行融合处理，获得3D观测图像，进行观测。
[0008]本申请中提供的一个或多个技术方案，至少具有如下技术效果或优点：
[0009]本申请提供的一种基于3D成像的内镜图像观测方法及系统，涉及图像处理
，解决了现有技术中在进行内镜图像观测的过程中缺乏结合医生眼距数据，导致观测时的3D成像准确性低、观测效果差的技术问题，实现了结合医生眼距数据对内镜图像进行3D图像处理，提高3D成像准确性、观测效果的技术效果。
附图说明
[0010]图1为本申请提供了一种基于3D成像的内镜图像观测方法流程示意图；
[0011]图2为本申请提供了一种基于3D成像的内镜图像观测方法中获得目标距离和目标角度流程示意图；
[0012]图3为本申请提供了一种基于3D成像的内镜图像观测方法中获得3D成像参数处理通道流程示意图；
[0013]图4为本申请提供了一种基于3D成像的内镜图像观测方法中获得3D成像生成通道流程示意图；
[0014]图5为本申请提供了一种基于3D成像的内镜图像观测系统结构示意图。
[0015]附图标记说明：内镜图像观测模块1，分析模块2，第一嵌入模块3，成像辐辏分析模块4，第二嵌入模块5，第一输入模块6，融合处理模块7。
具体实施方式
[0016]本申请通过提供一种基于3D成像的内镜图像观测方法及系统，用于解决现有技术中在进行内镜图像观测的过程中缺乏结合医生眼距数据，导致观测时的3D成像准确性低、观测效果差的技术问题。
[0017]实施例一
[0018]如图1所示，本申请实施例提供了一种基于3D成像的内镜图像观测方法，该方法应
用于一种基于3D成像的内镜图像观测系统，一种基于3D成像的内镜图像观测系统包括内镜端、处理模块和目镜端，该方法包括：
[0019]步骤S100：采集待进行内镜图像观测的目标用户的眼间距信息；
[0020]具体而言，本申请实施例提供的一种基于3D成像的内镜图像观测方法应用于一种基于3D成像的内镜图像观测系统，一种基于3D成像的内镜图像观测系统包括内镜端、处理模块和目镜端，该内镜端、处理模块和目镜端用于进行对目标组织图像参数的采集。
[0021]为保证医生在对内镜图像进行观测时3D成像的立体度，因此首先需要对待进行内镜图像观测的目标用户的眼间距离进行采集，待进行内镜图像观测的目标用户是具有一定专业背景并清楚明白内镜图像如何观测的相关医护人员，进一步的，可以通过用一个聚光的手电在目标用户前方一米远距离的地方，用手电照射目标用户，同时将目标用户的两个眼睛角膜上所出现的反光点之间的距离进行测量，最终将测量结果记作目标用户的眼间距信息，为后期实现基于3D成像对内镜图像进行观测作为重要参考依据。
[0022]步骤S200：通过所述内镜端，本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于3D成像的内镜图像观测方法，其特征在于，所述方法应用一种基于3D成像的内镜图像观测系统，所述系统包括内镜端、处理模块和目镜端，所述方法包括：采集待进行内镜图像观测的目标用户的眼间距信息；通过所述内镜端，采集包括待进行观察的目标组织图像的目标二维图像，并根据所述目标二维图像，分析所述内镜端与所述目标组织的距离和角度，获得目标距离和目标角度；构建3D成像参数处理通道，嵌入于所述处理模块内，所述3D成像参数处理通道包括辐辏分析分支和成像角度分析分支；将所述眼间距信息、目标距离和目标角度输入所述3D成像参数处理通道内的辐辏分析分支，进行成像辐辏分析处理，获得成像辐辏角，将所述眼间距信息、目标距离和所述目标角度输入所述成像角度分析分支，进行成像角度分析，获得左成像角度和右成像角度；构建3D成像生成通道，嵌入于所述处理模块内，所述3D成像生成通道包括图像分割分支、背景生成子通道和组织生成子通道，所述背景生成子通道侧向连接所述组织生成子通道，且所述组织生成子通道内的计算资源大于所述背景生成子通道内的计算资源；将所述目标二维图像输入所述图像分割分支，获取背景二维图像和组织二维图像，将所述背景二维图像与组织二分图像分别结合成像辐辏角、左成像角度和右成像角度输入所述背景生成子通道和组织生成子通道，获得左背景图像、右背景图像、左组织图像和右组织图像；对所述左背景图像和左组织图像，以及右背景图像和右组织图像进行融合处理，获得3D观测图像，进行观测。2.根据权利要求1所述的方法，其特征在于，通过所述内镜端，采集包括待进行观察的目标组织图像的目标二维图像，并根据所述目标二维图像，分析所述内镜端与所述目标组织的距离和角度，获得目标距离和目标角度，包括：采集包括待进行观察的目标组织图像的目标二维图像；对内镜观测的历史数据进行数据检索和处理，获取样本二维图像集合、样本距离集合和样本角度集合；采用所述样本二维图像集合、样本距离集合和样本角度集合，基于卷积神经网络，构建二维图像分析通道，嵌入于所述处理模块；将所述目标二维图像输入所述二维图像分析通道，进行卷积特征处理计算，获得所述目标距离和目标角度。3.根据权利要求1所述的方法，其特征在于，构建3D成像参数处理通道，包括：根据进行内镜图像观测的多个用户的用户信息，获取多个样本眼间距信息，以及根据内镜观测的历史数据，获取多个样本目标距离信息和多个样本目标角度信息；对所述多个样本眼间距信息、多个样本目标距离信息和多个样本目标角度信息进行组合，并进行辐辏角测量计算，获得多个样本辐辏角；采用所述多个样本眼间距信息、多个样本目标距离信息、多个样本目标角度信息和多个样本辐辏角作为构建数据，构建所述辐辏分析分支；对所述多个样本眼间距信息、多个样本目标距离信息和多个样本目标角度信息进行组合，并进行成像角度测量计算，获得多个样本左成像角度和多个样本右成像角度；采用所述多个样本眼间距信息、多个样本目标距离信息、多个样本目标角度信息、多个
样本左成像角度和多个样本右成像角度作为构建数据，构建所述成像角度分析分支；连接所述辐辏分析分支和所述成像角度分析分支，获得所述3D成像参数处理通道。4.根据权利要求3所述的方法，其特征在于，构建3D成像生成通道，包括：构建所述图像分割分支；对进行内镜观测的样本观测数据进行提取，获取样本二维图像集合，并进行图像分割，获取样本背景二维图像集合和样本组织二维图像集合；根据进行内镜观测的样本观测数据，采集在不同样本辐辏角、不同样本左成像角度和不同样本右成像角度下，所述样本背景二维图像集合和样本组织二维图像集合的观测图像，获得样本左背景图像集合、样本右背景图像集合、样本左组织图像集合和样本右组织图像集合；采用所述样本背景二维图像集合、多个样本辐辏角、多个样本左成像角度、多个样本...

【专利技术属性】
技术研发人员：张澍田，孙秀静，朱圣韬，陈东，许之寅，曹锐，
申请(专利权)人：新光维医疗科技苏州股份有限公司，
类型：发明
国别省市：