肠镜图像识别系统、终端设备及存储介质技术方案

本申请提供一种肠镜图像识别系统、终端设备及存储介质，该系统包括：第一获取模块，用于获取肠镜采集用户的连续视频帧白光肠镜图像；第一确定模块，用于确定连续视频帧白光肠镜图像中出现异常情况的异常帧白光肠镜图像；第二获取模块，用于获取肠镜采集用户的连续视频帧窄谱肠镜图像；第二确定模块，用于确定连续视频帧窄谱肠镜图像中出现异常情况的异常帧窄谱肠镜图像；识别模块，用于根据异常帧白光肠镜图像和异常帧窄谱肠镜图像，识别异常位置的浸润程度。本申请提供的肠镜图像识别系统，可以代替人工进行图像识别，减少人工经验不足，所导致的识别率低下的问题，故本申请可以提高识别准确度。识别准确度。识别准确度。

【技术实现步骤摘要】
肠镜图像识别系统、终端设备及存储介质


[0001]本申请涉及图像识别领域，其具体涉及一种肠镜图像识别系统、终端设备及存储介质。

技术介绍

[0002]通常情况下若肠道出现异常，在不确定是否需要治疗诊断时，需要对肠道中进行一定的检测，才能知道肠道中的具体情况。然而，应对肠道异常的情况可以是在内镜下检测相关的异常。
[0003]而在治疗开始之前，肠镜是判断结肠道异常时有力的工具，而异常情况在肠道中，异常位置上的异常物的浸润深度又是有力的检测指标，内镜操作人员应在决定对用户是否需要诊断治疗之前，通过内镜评估，才能保证后续开启诊断或者治疗，以确保能采用正确系统帮助用户。但受到人眼的局限性，对于肠道中异物的浸润深度预测的准确度较低。

技术实现思路

[0004]本申请提供一种肠镜图像识别系统，当图像异常时，可以自动检测出图像中异常位置的浸润程度。
[0005]第一方面，本申请提供一种肠镜图像识别系统，所述系统包括：第一获取模块，用于获取肠镜采集用户的连续视频帧白光肠镜图像；第一确定模块，用于确定所述连续视频帧白光肠镜图像中出现异常情况的异常帧白光肠镜图像；第二获取模块，用于获取所述肠镜采集所述用户的连续视频帧窄谱肠镜图像；第二确定模块，用于确定所述连续视频帧窄谱肠镜图像中出现异常情况的异常帧窄谱肠镜图像；识别模块，用于根据所述异常帧白光肠镜图像和所述异常帧窄谱肠镜图像，识别所述异常位置的浸润程度。
[0006]在本申请一些实施例中，所述第一获取模块具体用于：获取所述肠镜在预设的白光模式下拍摄的白光视频；对所述白光视频进行采帧操作，得到初始连续视频帧白光图像；对所述初始连续视频帧白光图像进行裁剪，得到有效连续视频帧白光图像；对所述有效连续视频帧白光图像进行区域插值，得到缩小的连续视频帧白光图像，将所述缩小的连续视频帧白光图像作为所述连续视频帧白光肠镜图像。
[0007]在本申请一些实施例中，所述第一确定模块具体用于：以所述连续视频帧白光肠镜图像中任意一帧图像为当前帧白光肠镜图像，判断所述当前帧白光肠镜图像中是否出现异常情况；若所述当前帧白光肠镜图像中出现异常情况，确定所述异常情况的风险程度；根据所述风险程度，确定所述当前帧白光肠镜图像为所述异常帧白光肠镜图像；
若所述当前帧白光肠镜图像中未出现异常情况，判断所述当前帧白光肠镜图像的下一帧图像中是否出现异常情况，直至获取所述异常帧白光肠镜图像为止。
[0008]在本申请一些实施例中，所述第一确定模块具体还用于：将所述当前帧白光肠镜图像输入预设的异常情况风险模型，得到异常情况风险结果；若所述异常情况风险结果符合预设的第一风险结果，确定所述当前帧白光肠镜图像为所述异常帧白光肠镜图像。
[0009]在本申请一些实施例中，所述第二获取模块具体用于：获取所述肠镜在预设的窄谱模式下拍摄的所述用户的窄谱视频；对所述窄谱视频进行采帧操作，得到初始连续视频帧窄谱图像；对所述初始连续视频帧窄谱图像进行裁剪，得到有效连续视频帧窄谱图像；对所述有效连续视频帧窄谱图像进行区域插值，得到缩小的连续视频帧窄谱图像，将所述缩小的连续视频帧窄谱图像作为所述连续视频帧窄谱肠镜图像。
[0010]在本申请一些实施例中，所述第二确定模块具体用于：以所述连续视频帧窄谱肠镜图像中任意一帧图像为当前帧窄谱肠镜图像，判断所述当前帧窄谱肠镜图像中是否出现异常；若所述当前帧窄谱肠镜图像中出现异常情况，确定所述当前帧窄谱肠镜图像为所述异常帧窄谱肠镜图像；若所述当前帧窄谱肠镜图像中未出现异常情况，判断所述前帧窄谱肠镜图像的下一帧图像中是否出现异常情况，直至获取所述异常帧窄谱肠镜图像为止。
[0011]在本申请一些实施例中，所述识别模块具体用于：将所述异常帧白光肠镜图像输入预设的浸润深度检测模型的白光分支卷积网络分支，得到白光网络特征；将所述异常帧窄谱肠镜图像输入所述浸润深度检测模型的窄谱分支卷积网络分支，得到窄谱网络特征；对所述白光网络特征和所述窄谱网络特征在同通道维度上进行特征拼接，得到拼接网络特征；将所述拼接网络特征输入所述浸润深度检测模型中的分类器，识别所述异常位置的浸润程度。
[0012]第二方面，本申请还提供一种终端设备，所述终端设备包括处理器、存储器以及存储于所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序以实现任一项所述的肠镜图像识别系统中的步骤。
[0013]第三方面，本申请还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行以实现任一项所述的肠镜图像识别系统中的步骤。
[0014]本申请提供的肠镜图像识别系统，可以通过肠镜在白光模式下和窄谱模式下实时传送的视频图像，识别出图像中是否存在异常情况。若出现异常情况时，还能根据异常情况识别出异常情况位置的浸润程度，避免了人工识别浸润程度时，受人为经验限制，导致人工识别准确度低的问题。因此，本申请能够提高浸润程度识别的准确度。
附图说明
[0015]为了更清楚地说明本专利技术实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图图1是本申请实施例中提供的肠镜图像识别系统的场景示意图；图2是本申请实施例中肠镜图像识别系统的一个功能模块示意图；图3是本申请实施例中肠镜图像识别系统的一个神经网络结构示意图；图4是本申请实施例中终端设备的结构示意图。
具体实施方式
[0016]下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
[0017]在本申请的描述中，需要理解的是，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本申请的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。
[0018]在本申请中，“示例性”一词用来表示“用作例子、例证或说明”。本申请中被描述为“示例性”的任何实施例不一定被解释为比其它实施例更优选或更具优势。为了使本领域任何技术人员能够实现和使用本申请，给出了以下描述。在以下描述中，为了解释的目的而列出了细节。应当明白的是，本领域普通技术人员可以认识到，在不使用这些特定细节的情况下也可以实现本申请。在其它实例中，不会对公知的结构和过程进行详细阐述，以避免不必要的细节使本申请的描述变得晦涩。因此，本申请并非旨在限于所示的实施例，而是与符合本申请所公开的原理和特征的最广范围相一致。
[0019]本申请提供了一种肠镜图像识别系统、终端设备及存储介质，以下分别进行详细说本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种肠镜图像识别系统，其特征在于，所述系统包括：第一获取模块，用于获取肠镜采集用户的连续视频帧白光肠镜图像；第一确定模块，用于确定所述连续视频帧白光肠镜图像中出现异常情况的异常帧白光肠镜图像；第二获取模块，用于获取所述肠镜采集所述用户的连续视频帧窄谱肠镜图像；第二确定模块，用于确定所述连续视频帧窄谱肠镜图像中出现异常情况的异常帧窄谱肠镜图像；识别模块，用于根据所述异常帧白光肠镜图像和所述异常帧窄谱肠镜图像，识别所述异常位置的浸润程度。2.根据权利要求1所述的肠镜图像识别系统，其特征在于，所述第一获取模块具体用于：获取所述肠镜在预设的白光模式下拍摄的白光视频；对所述白光视频进行采帧操作，得到初始连续视频帧白光图像；对所述初始连续视频帧白光图像进行裁剪，得到有效连续视频帧白光图像；对所述有效连续视频帧白光图像进行区域插值，得到缩小的连续视频帧白光图像，将所述缩小的连续视频帧白光图像作为所述连续视频帧白光肠镜图像。3.根据权利要求1所述的肠镜图像识别系统，其特征在于，所述第一确定模块具体用于：以所述连续视频帧白光肠镜图像中任意一帧图像为当前帧白光肠镜图像，判断所述当前帧白光肠镜图像中是否出现异常情况；若所述当前帧白光肠镜图像中出现异常情况，确定所述异常情况的风险程度；根据所述风险程度，确定所述当前帧白光肠镜图像为所述异常帧白光肠镜图像；若所述当前帧白光肠镜图像中未出现异常情况，判断所述当前帧白光肠镜图像的下一帧图像中是否出现异常情况，直至获取所述异常帧白光肠镜图像为止。4.根据权利要求3所述的肠镜图像识别系统，其特征在于，所述第一确定模块具体还用于：将所述当前帧白光肠镜图像输入预设的异常情况风险模型，得到异常情况风险结果；若所述异常情况风险结果符合预设的第一风险结果，确定所述当前帧白光肠镜图像为所述异常帧白光肠镜图像。5.根据权利要求1所述的肠镜图像识别系统，其特征在于，所述第二获取模块具体用于：获取所述肠镜在预设的窄谱模式下拍摄的所述用户的窄谱视频；对所述窄谱视频进行采帧操作，得到初始连续视频帧窄谱图像；对所述初始连续视频帧窄谱图像进行裁剪，得到有效连续视频帧窄谱图像；对所述有效连续视频帧窄谱图像进行区域插值，得到缩小的连续视频帧窄谱图像，将所述缩小的连续视频帧窄谱图像作为所述连续视频帧窄谱肠镜图像。6.根据权利要求1所述的肠镜图像识别系统，其特征在于，...

【专利技术属性】
技术研发人员：邢达奇，于红刚，张阔，刘奇为，
申请(专利权)人：武汉楚精灵医疗科技有限公司，
类型：发明
国别省市：