内窥镜图像处理方法技术

本公开的实施例涉及用于内窥镜图像处理的方法

【技术实现步骤摘要】
内窥镜图像处理方法、信息处理设备及存储介质


[0001]本公开的实施例涉及图像处理领域，并且更具体地，涉及内窥镜图像处理方法
、
信息处理设备及存储介质
。

技术介绍

[0002]随着医学技术的不断发展，内窥镜
(
例如胃镜或者肠镜等
)
已经逐渐成为辅助医生诊断消化道疾病的重要手段
。
在内窥镜检查过程中，医师将内窥镜探入到待检查的器官，内窥镜的镜头感测到的信息通过图像
/
视频的形式显示给医师
。
[0003]由于内窥镜的镜头感测到的图像可能有各种问题，例如，图像模糊，曝光充足
、
曝光不足以及带有各种附着物
(
黄粘液
、
水粘液和粪便等
)
；另外，各个医师的经验不同，对内窥镜操作的熟练程度也不同，医师在操作内窥镜进行检查的过程中，有可能操作内窥镜的方位不正确，就会出现例如没有照全点位
、
点位的位置颠倒
、
点位的位置偏移等情况
。
因此，在内窥镜检查过程中，如何更准确地评估内窥镜图像的图像特性
/
点位特性，并针对不符合要求的内窥镜图像向医师等用户进行提示，是亟待解决的问题
。

技术实现思路

[0004]本公开的实施例提供了内窥镜图像处理的方法
、
信息处理设备和计算机可读存储介质
。
[0005]在本公开的第一方面，提供一种用于内窥镜图像处理的方法
。
该方法包括接收内窥镜视频流中的内窥镜图像
。
该方法还包括响应于内窥镜图像的图像特性的图像特性值不符合阈值条件和
/
或点位特性不符合要求，提供提示信息
。
[0006]在本公开的第二方面，提供了一种内窥镜系统，该内窥镜系统包括：内窥镜，用于获取内窥镜视频流中的内窥镜图像；显示器，用于显示该内窥镜图像；以及图像处理设备，被配置为执行根据本公开的第一方面所描述的内窥镜图像处理方法
。
[0007]在本公开的第三方面，提供了一种信息处理设备，该信息处理设备包括处理器，该处理器被配置为执行根据本公开的第一方面所描述的内窥镜图像处理方法
。
[0008]在本公开的第四方面，提供了一种计算机可读存储介质，该计算机可读存储介质具有在其上存储的机器可执行指令，该机器可执行指令在由设备执行时使该设备执行根据本公开的第一方面所描述的内窥镜图像处理方法
。
[0009]提供
技术实现思路
部分是为了以简化的形式来介绍一系列概念，它们在下文的具体实施方式中将被进一步描述
。

技术实现思路
部分不旨在标识本公开的关键特征或必要特征，也不旨在限制本公开的范围
。
本公开的其它特征将通过以下的描述变得容易理解
。
附图说明
[0010]从下文的公开内容和权利要求中，本专利技术的目的
、
优点和其他特征将变得更加明显
。
这里仅出于示例的目的，参考附图来给出优选实施例的非限制性描述，在附图中：
[0011]图
1A
至图
1F
示意性地示出了图像特性不符合要求的几种示例性情况；
[0012]图2示出了根据本公开的实施例的用于内窥镜图像处理的示例系统的框图；
[0013]图3示出了根据本公开的实施例的用于内窥镜图像处理的示例方法
300
的流程图；
[0014]图4示出了根据本公开的实施例的用于确定内窥镜图像的图像特性值示例方法
400
的流程图；
[0015]图
5A
至图
5F
中示出根据本公开的实施例的内窥镜图像及其对应的超像素分割结果图；
[0016]图6示意性地示出根据本公开实施例的胃角部分的点位掩码图的示例；
[0017]图7示出了根据本公开的实施例的用于确定内窥镜图像的图像特性值的方法
700
的流程图；
[0018]图
8A
至图
8B
示意性地示出了根据本公开实施例的分割区域的示意图；以及
[0019]图9示出了可以用来实施本公开的实施例的示例设备
900
的示意性框图
。
[0020]在各个附图中，相同或对应的标号表示相同或对应的部分
。
具体实施方式
[0021]下面将参照附图更详细地描述本公开的实施例
。
虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开
。
应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围
。
[0022]在本公开的实施例的描述中，术语“包括”及其类似用语应当理解为开放性包含，即“包括但不限于”。
术语“基于”应当理解为“至少部分地基于”。
术语“一个实施例”或“该实施例”应当理解为“至少一个实施例”。
术语“第一”、“第二”等可以指代不同的或相同的对象
。
下文还可能包括其他明确的和隐含的定义
。
[0023]如上所述，在内窥镜检查过程中，如何更准确
、
快速
、
鲁棒地评估内窥镜图像的图像特性，并针对不符合要求的内窥镜图像向医师等用户进行提示，是亟待解决的问题
。
[0024]图
1A
至图
1F
示意性地示出了在内窥镜检查过程中，获取到的内窥镜图像的图像特性不符合要求的几种示例性情况
。
图
1A
至图
1F
，分别为图像轻微模糊
、
图像严重模糊
、
图像曝光过度
、
图像曝光不足
、
黄粘液附着以及水粘液附着的情况
。
具有这些图像特性的内窥镜图像通常会影响医生对于病灶区的判断，而且如果不能对医师及时地进行提示以使其在当前内窥镜检查中采取一定的措施来获得符合要求的图像，还有可能需要对患者再进行二次检查，这也引起患者的不适
。
[0025]此外，由于各个医师的经验不同，对内窥镜操作的熟练程度也不同，医师在操作内窥镜进行检查的过程中，有可能操作内窥镜的方位不正确，就会出现例如没有照全点位
、
点位的位置颠倒
、
点位的位置偏移等情况，在这种情况下获得的内窥镜图像
/
视频，使得医生无法对于病灶区做出准确的判断
。
[0026]图2示出了根据本公开的实施例的用于内窥镜图像处理的系统
200
...

【技术保护点】

【技术特征摘要】
1.
一种内窥镜图像处理方法，包括：接收内窥镜视频流中的内窥镜图像；以及响应于所述内窥镜图像的图像特性的图像特性值不符合阈值条件和
/
或点位特性不符合要求，提供提示信息
。2.
根据权利要求1所述的内窥镜图像处理方法，其中，所述图像特性值与所述内窥镜图像对应的点位的特征区域相关
。3.
根据权利要求1所述的内窥镜图像处理方法，其中，所述图像特性包括以下项中的至少一种：模糊度
、
曝光度
、
附着物类型，并且其中，每种图像特性包括至少一个等级类别
。4.
根据权利要求3所述的内窥镜图像处理方法，其中，所述提示信息包括第一提示信息
、
第二提示信息
、
第三提示信息和第四提示信息中的至少一种，并且其中，所述第一提示信息
、
第二提示信息
、
第三提示信息和第四提示信息分别针对模糊度
、
曝光度
、
附着物类型和点位特性进行提示
。5.
根据权利要求3所述的内窥镜图像处理方法，其中，所述图像特性包括附着物类型，所述方法包括：响应于所述内窥镜图像的附着物类型对应的图像特性值指示所述内窥镜图像中存在附着物，确定所述内窥镜图像的图像特性的图像特性值不符合阈值条件，其中，提供提示信息包括：在被显示的所述内窥镜图像或所述内窥镜视频流的视频帧上，通过标注的方式标注出所述附着物所在的区域
。6.
根据权利要求3所述的内窥镜图像处理方法，其中，所述图像特性值由向量表示，并且其中，所述向量中的每个元素表示相应的图像特性的等级类别
。7.
根据权利要求6所述的内窥镜图像处理方法，还包括：将所述向量中的每个元素与阈值向量中的对应的元素进行比较；以及响应于所述向量中的至少一个元素与所述阈值向量中的对应的元素匹配，确定所述图像特性值不符合所述阈值条件
。8.
根据权利要求1所述的内窥镜图像处理方法，还包括：对所述内窥镜图像进行超像素分割，以获得至少一个超像素；对所述至少一个超像素进行特征提取，以获得超像素特征，其中，所述超像素特征包括颜色特征
、
纹理特征
、
边缘特征以及反光特征中的至少一种特征；以及基于所述至少一个超像素的所述超像素特征和所述内窥镜图像对应的点位的特征区域信息，确定所述内窥镜图像的所述图像特性值
。9.
根据权利要求8所述的内窥镜图像处理方法，还包括：获取超像素特征库，其中，所述超像素特征库中存储有样本超像素的样本超像素特征以及所述样本超像素对应的图像特性值；以及获取至少一个点位的特征区域信息，其中，所述至少一个点位的特征区域信息表征所述内窥镜图像对应的所述点位的特征区域
。10.
根据权利要求9所述的内窥镜图像处理方法，其中，基于所述至少一个超像素的所述超像素特征和所述内窥镜图像对应的点位的特征区域信息，确定所述内窥镜图像的所述图像特性值，包括：针对所述图像特性中的每种图像特性，确定所述至少一个超像素中的第一超像素的至
少一个对应度，其中，所述至少一个对应度分别对应于所述每种图像特性中的至少一个等级类别，并且表示所述第一超像素与对应的等级类别的对应性
。11.
根据权利要求
10
所述的内窥镜图像处理方法，其中，确定所述至少一个超像素中的第一超像素的至少一个对应度，包括：将所述第一超像素的超像素特征与所述超像素特征库中对应于所述每种图像特性中的所述至少一个等级类别的样本超像素的超像素特征分别进行...

【专利技术属性】
技术研发人员：李艳丽，张霓，
申请(专利权)人：日本电气株式会社，
类型：发明
国别省市：