本申请涉及一种内镜图像的拼接方法、装置和计算机设备。所述方法包括：获取扫描到的按时间排序的内镜图像序列；采用无回路分段法对内镜图像序列进行分段，得到多个分段图像序列；无回路分段法包括：由起始图像帧起，在当前图像帧的扫描区域重合于已扫描区域时断开内镜图像序列，以当前图像帧作为下一个起始图像帧重新分段；采用2D变换，对各个分段图像序列中的图像帧进行拼接，得到对应的分段融合图；采用单应性配准法，对分段融合图进行拼接，生成全局图。采用本方法能够解决因为内窥镜运行中镜头的光心变化而导致拼接出的全局视图的重影问题。重影问题。重影问题。
【技术实现步骤摘要】
一种内镜图像的拼接方法、装置和计算机设备
[0001]本申请涉及内镜图像处理
，特别是涉及一种内镜图像的拼接方法、装置和计算机设备。
技术介绍
[0002]医用内窥镜是人体腔道可送入器官组织的直观检查手段，如肠胃镜、膀胱镜检查等，医生以此观察器官组织内部结构形态，进行疾病的筛查。内窥镜检查由医生手动操作完成，因为其扫描速度，扫描完整度受人为因素的影响，在检查过程中会存在某些部位漏检，误判等问题。然而，重建出器官组织的全局视图，检测到病变部位后，根据病变部位到全局视图的映射关系，在图中标识病变位置，对医生临床治疗具有非常重要的参考意义。
[0003]现有技术采用对图像相似度较高的内镜图像利用图像之间的单应性关系进行全局视图的拼接。而利用单应性关系直接对内镜图像拼接，因为内窥镜运行中镜头的光心变化，使得拼接结果会有较多重影。
[0004]然而，因为内窥镜运行中镜头的光心变化而导致拼接出的全局视图的重影问题，目前仍没有得到有效解决。
技术实现思路
[0005]基于此，有必要针对上述技术问题，提供一种内镜图像的拼接方法、装置、计算机设备和计算机可读存储介质。
[0006]第一方面，本申请提供了一种内镜图像的拼接方法。所述方法包括：获取扫描到的按时间排序的内镜图像序列；采用无回路分段法对所述内镜图像序列进行分段，得到多个分段图像序列；所述无回路分段法包括：由起始图像帧起，在当前图像帧的扫描区域重合于已扫描区域时断开所述内镜图像序列，以所述当前图像帧作为下一个起始图像帧重新分段；采用2D变换，对各个所述分段图像序列中的图像帧进行拼接，得到对应的分段融合图；采用单应性配准法，对所述分段融合图进行拼接，生成全局图。
[0007]在其中一个实施例中，所述获取扫描到的按时间排序的内镜图像序列之后，所述方法还包括：提取所述内镜图像序列中的图像帧的特征点。
[0008]在其中一个实施例中，采用2D变换，对各个所述分段图像序列中的图像帧进行拼接，得到对应的分段融合图，包括：针对每个所述分段图像序列，基于各个所述分段图像序列中的图像帧的所述特征点，得到各个所述分段图像序列中的图像帧之间的变换矩阵；基于各个所述分段图像序列中的图像帧之间的变换矩阵，对各个所述分段图像序列中的图像帧进行拼接，得到每个所述分段图像序列对应的所述分段融合图。
[0009]在其中一个实施例中，所述针对每个所述分段图像序列，基于各个所述分段图像序列中的图像帧的所述特征点，得到各个所述分段图像序列中的图像帧之间的变换矩阵，包括：针对每个所述分段图像序列，基于各个所述分段图像序列中的图像帧的所述特征点，对各个所述分段图像序列中的图像帧进行相似度匹配，得到各个所述分段图像序列中的图像帧之间的配准点；根据各个所述分段图像序列中的图像帧之间的配准点，计算生成各个所述分段图像序列中的图像帧之间的变换矩阵。
[0010]在其中一个实施例中，所述采用单应性配准法，对所述分段融合图进行拼接，生成全局图，包括：提取每个所述分段图像序列对应的所述分段融合图中的特征点；基于各个所述分段融合图中的特征点，对各个所述分段融合图进行相似度匹配，得到各个所述分段融合图之间的配准点；根据各个所述分段融合图之间的配准点，计算生成各个所述分段融合图之间的变换矩阵；基于各个所述分段融合图之间的变换矩阵，采用所述单应性配准法，对所有的所述分段融合图进行拼接，生成所述全局图。
[0011]在其中一个实施例中，在所述提取所述内镜图像序列中的图像帧的特征点之前，所述方法还包括：对获取到的所述内镜图像序列进行过滤、去除过曝、去除过模糊、去除非目标区域、去模糊以及对比度增强中的一项或多项操作。
[0012]在其中一个实施例中，所述获取扫描到的按时间排序的内镜图像序列之后，所述方法还包括：基于预设的目标组织检测方法，对获取到的所述内镜图像序列进行检测，生成所述内镜图像序列中的目标组织检测结果。
[0013]在其中一个实施例中，在所述目标组织检测结果指示所述内镜图像序列中存在所述目标组织的情况下，在所述全局图中标识所述目标组织的位置。
[0014]在其中一个实施例中，采用2D变换，对各个所述分段图像序列中的图像帧进行拼接，得到对应的分段融合图之后，所述方法还包括：响应于用户针对所述目标组织所在的图像帧的选定操作，矫正各个所述分段融合图之间的变换矩阵，对所有的所述分段融合图进行拼接，生成以所述目标组织所在位置为中心的二维重建展示图。
[0015]第二方面，本申请还提供了一种内镜图像的拼接装置。所述装置包括：获取模块，用于获取扫描到的按时间排序的内镜图像序列；分段模块，用于采用无回路分段法对所述内镜图像序列进行分段，得到多个分段图像序列；所述无回路分段法包括：由起始图像帧起，在当前图像帧的扫描区域重合于已扫描区域时断开所述内镜图像序列，以所述当前图像帧作为下一个起始图像帧重新分段；第一拼接模块，用于采用2D变换，对各个所述分段图像序列中的图像帧进行拼接，得到对应的分段融合图；
以及第二拼接模块，用于采用单应性配准法，对所述分段融合图进行拼接，生成全局图。
[0016]第三方面，本申请还提供了一种计算机设备。所述计算机设备包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现上述第一个方面所述的内镜图像的拼接方法。
[0017]第四方面，本申请还提供了一种计算机可读存储介质。所述计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述第一个方面所述的内镜图像的拼接方法。
[0018]上述内镜图像的拼接方法、装置、计算机设备和存储介质，通过获取按时间排序的内镜图像序列，进而采用无回路分段法对内镜图像序列进行分段，得到多个分段图像序列，并通过2D变换对分段图像序列进行拼接，生成对应的分段融合图，进而对所有的分段融合图进行二次拼接，生成全局图。其通过无回路分段法避免镜头的平移及视角变化累积为较大量，视差较大，直接用2D变换拼接存在较多重影的问题。通过及时进行分段，进而对分段图像进行拼接，生成对应的分段融合图，然后再对所有的分段融合图进行二次拼接，生成全局图，解决了因为内窥镜运行中镜头的光心变化而导致拼接出的全局视图的重影问题。
[0019]本申请的一个或多个实施例的细节在以下附图和描述中提出，以使本申请的其他特征、目的和优点更加简明易懂。
附图说明
[0020]此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：图1为本申请一实施例提供的内镜图像的拼接方法的终端的硬件结构框图；图2为本申请一实施例提供的内镜图像的拼接方法的流程图；图3为本申请一优选实施例提供的内镜图像的拼接方法的流程图；图4为本申请一实施例提供的内镜图像的拼接装置的结构框图。
具体实施方式
[0021]为更清楚地理解本申请的目的、技术方案和优点，下面结合附图和实施例，对本申请本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种内镜图像的拼接方法，其特征在于，所述方法包括：获取扫描到的按时间排序的内镜图像序列；采用无回路分段法对所述内镜图像序列进行分段，得到多个分段图像序列；所述无回路分段法包括：由起始图像帧起，在当前图像帧的扫描区域重合于已扫描区域时断开所述内镜图像序列，以所述当前图像帧作为下一个起始图像帧重新分段；采用2D变换，对各个所述分段图像序列中的图像帧进行拼接，得到对应的分段融合图；采用单应性配准法，对所述分段融合图进行拼接，生成全局图。2.根据权利要求1所述的内镜图像的拼接方法，其特征在于，所述获取扫描到的按时间排序的内镜图像序列之后，所述方法还包括：提取所述内镜图像序列中的图像帧的特征点。3.根据权利要求2所述的内镜图像的拼接方法，其特征在于，采用2D变换，对各个所述分段图像序列中的图像帧进行拼接，得到对应的分段融合图，包括：针对每个所述分段图像序列，基于各个所述分段图像序列中的图像帧的所述特征点，得到各个所述分段图像序列中的图像帧之间的变换矩阵；基于各个所述分段图像序列中的图像帧之间的变换矩阵，对各个所述分段图像序列中的图像帧进行拼接，得到每个所述分段图像序列对应的所述分段融合图。4.根据权利要求3所述的内镜图像的拼接方法，其特征在于，所述针对每个所述分段图像序列，基于各个所述分段图像序列中的图像帧的所述特征点，得到各个所述分段图像序列中的图像帧之间的变换矩阵，包括：针对每个所述分段图像序列，基于各个所述分段图像序列中的图像帧的所述特征点，对各个所述分段图像序列中的图像帧进行相似度匹配，得到各个所述分段图像序列中的图像帧之间的配准点；根据各个所述分段图像序列中的图像帧之间的配准点，计算生成各个所述分段图像序列中的图像帧之间的变换矩阵。5.根据权利要求1所述的内镜图像的拼接方法，其特征在于，所述采用单应性配准法，对所述分段融合图进行拼接，生成全局图，包括：提取每个所述分段图像序列对应的所述分段融合图中的特征点；基于各个所述分段融合图中的特征点，对各个所述分段融合图进行相似度匹配，得到各个所述分段融合图之间的配准点；根据各个所述分段融合图之间的配准点，计算生成各个所述分段融合图之间的变换矩阵；基于各个所述分段融合图之间的变换矩阵，采用所述单应性...
【专利技术属性】
技术研发人员：周奇明，姚卫忠，
申请(专利权)人：浙江华诺康科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。