一种图像处理方法、装置及设备制造方法及图纸

本申请提供一种图像处理方法、装置及设备，该方法包括：分别提取可见光图像的处理对象和超声图像的处理对象，得到M个可见光像素点集合和N个超声像素点集合，可见光像素点集合包括具有相同属性的处理对象的多个可见光图像像素点，超声像素点集合包括具有相同属性的处理对象的多个超声图像像素点；查找与第一超声像素点集合匹配的第一可见光像素点集合，第一可见光像素点集合对应的处理对象与第一超声像素点集合对应的处理对象的属性相同；基于所述第一可见光像素点集合内的各个像素点的颜色值对所述第一超声像素点集合进行处理，得到所述超声图像对应的彩色超声图像。通过本申请的技术方案，能够重建超声图像的颜色，具有更好的图像效果。有更好的图像效果。有更好的图像效果。

【技术实现步骤摘要】
一种图像处理方法、装置及设备


[0001]本申请涉及图像处理
，尤其涉及一种图像处理方法、装置及设备。

技术介绍

[0002]内窥镜(Endoscopes)是一种常用的医疗器械，由导光束结构及一组镜头组成，在内窥镜进入到目标对象的内部后，可以使用内窥镜采集目标对象内部的可见光图像，基于目标对象内部的可见光图像对目标对象进行检查及治疗。当需要对目标对象内部的指定类型组织进行检查及治疗时，需要先通过内窥镜采集目标对象内部的指定类型组织对应的可见光图像，基于该可见光图像分析出指定类型组织的实际位置，然后才能够对该指定类型组织进行检查及治疗。
[0003]然而，如何基于该可见光图像分析出指定类型组织的实际位置，需要较高的专业知识和大量实操经验，对于经验不够丰富的医生来说，可能无法找到指定类型组织的实际位置，即使有内窥镜采集的可见光图像，也无法基于可见光图像获知目标对象内部的指定类型组织的实际位置，导致无法进行检查及治疗。

技术实现思路

[0004]本申请提供一种图像处理方法，所述方法包括：
[0005]获取可见光图像和超声图像，其中，所述可见光图像和所述超声图像是针对同一目标组织的图像；
[0006]分别提取所述可见光图像的处理对象和所述超声图像的处理对象，得到M个可见光像素点集合和N个超声像素点集合，其中，所述可见光像素点集合包括具有相同属性的处理对象的多个可见光图像像素点，所述超声像素点集合包括具有相同属性的处理对象的多个超声图像像素点，M和N为正整数；
[0007]查找与第一超声像素点集合匹配的第一可见光像素点集合，所述第一可见光像素点集合对应的处理对象与所述第一超声像素点集合对应的处理对象的属性相同，所述第一超声像素点集合是N个超声像素点集合中任一个；
[0008]基于所述第一可见光像素点集合内的各个像素点的颜色值对所述第一超声像素点集合进行处理，得到所述超声图像对应的彩色超声图像。
[0009]本申请提供一种图像处理装置，所述装置包括：
[0010]获取模块，用于获取可见光图像和超声图像，其中，所述可见光图像和所述超声图像是针对同一目标组织的图像；
[0011]处理模块，用于分别提取所述可见光图像的处理对象和所述超声图像的处理对象，得到M个可见光像素点集合和N个超声像素点集合，所述可见光像素点集合包括具有相同属性的处理对象的多个可见光图像像素点，所述超声像素点集合包括具有相同属性的处理对象的多个超声图像像素点，M和N为正整数；
[0012]确定模块，用于查找与第一超声像素点集合匹配的第一可见光像素点集合，所述
第一可见光像素点集合对应的处理对象与所述第一超声像素点集合对应的处理对象的属性相同，第一超声像素点集合是N个超声像素点集合中任一个；
[0013]重建模块，用于基于所述第一可见光像素点集合内的各个像素点的颜色值对所述第一超声像素点集合进行处理，得到所述超声图像对应的彩色超声图像。
[0014]本申请提供一种电子设备，包括：处理器和机器可读存储介质，所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令；所述处理器用于执行机器可执行指令，以实现本申请上述示例的图像处理方法。
[0015]由以上技术方案可见，本申请实施例中，获取可见光图像和超声图像，可见光图像和超声图像是针对同一目标组织的图像，从而通过超声图像辅助获知目标对象的目标组织的实际位置，能够准确获知目标对象的目标组织的实际位置，提醒医生尽快找到目标组织的实际位置，并进行检查及治疗，提高识别准确率。可以基于可见光图像对超声图像进行还原得到彩色超声图像，即将可见光图像的颜色映射到超声图像上，进而重建超声图像的颜色，恢复超声图像各区域的真实色彩，具有更好的图像效果，提升超声图像的分辨能力。
附图说明
[0016]为了更加清楚地说明本申请实施例或者现有技术中的技术方案，下面将对本申请实施例或者现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，还可以根据本申请实施例的这些附图获得其他的附图。
[0017]图1是本申请一种实施方式中的图像处理方法的流程示意图；
[0018]图2是本申请一种实施方式中的内窥镜系统的结构示意图；
[0019]图3是本申请一种实施方式中的超声诊断系统的结构示意图；
[0020]图4是本申请一种实施方式中的超声诊断系统的功能结构示意图；
[0021]图5是本申请一种实施方式中的图像处理方法的流程示意图；
[0022]图6是本申请一种实施方式中的可见光图像和超声图像的示意图；
[0023]图7是本申请一种实施方式中的图像处理装置的结构示意图；
[0024]图8是本申请一种实施方式中的电子设备的结构示意图。
具体实施方式
[0025]在本申请实施例使用的术语仅仅是出于描述特定实施例的目的，而非限制本申请。本申请和权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其它含义。还应当理解，本文中使用的术语“和/或”是指包含一个或多个相关联的列出项目的任何或所有可能组合。
[0026]应当理解，尽管在本申请实施例可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本申请范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，此外，所使用的词语“如果”可以被解释成为“在
……
时”或“当
……
时”或“响应于确定”。
[0027]本申请实施例中提出一种图像处理方法，可以应用于任意类型的设备，参见图1所
示，为该图像处理方法的流程示意图，该方法可以包括：
[0028]步骤101、获取可见光图像和超声图像，可见光图像和超声图像可以是针对同一目标组织的图像，该目标组织为目标对象(如待检体)内部或者外部的指定类型组织。其中，可见光图像和超声图像可以是同一采集时刻的图像，或者，可见光图像和超声图像可以是位于某个时间范围的图像，如可见光图像的采集时刻早于超声图像的的采集时刻，且两个采集时刻的差值小于阈值；或可见光图像的采集时刻晚于超声图像的的采集时刻，且两个采集时刻的差值小于阈值。
[0029]步骤102、分别提取可见光图像的处理对象和超声图像的处理对象，得到M个可见光像素点集合和N个超声像素点集合，其中，可见光像素点集合包括具有相同属性的处理对象的多个可见光图像像素点，超声像素点集合包括具有相同属性的处理对象的多个超声图像像素点，M和N均为正整数。
[0030]示例性的，为了提取可见光图像的处理对象，得到M个可见光像素点集合，可以采用语义分割的方式提取可见光图像的处理对象，得到M个可见光像素点集合，也可以采用其它方式提取可见光图像的处理对象，得到M个本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法，其特征在于，所述方法包括：获取可见光图像和超声图像，其中，所述可见光图像和所述超声图像是针对同一目标组织的图像；分别提取所述可见光图像的处理对象和所述超声图像的处理对象，得到M个可见光像素点集合和N个超声像素点集合，其中，所述可见光像素点集合包括具有相同属性的处理对象的多个可见光图像像素点，所述超声像素点集合包括具有相同属性的处理对象的多个超声图像像素点，M和N为正整数；查找与第一超声像素点集合匹配的第一可见光像素点集合，所述第一可见光像素点集合对应的处理对象与所述第一超声像素点集合对应的处理对象的属性相同，所述第一超声像素点集合是N个超声像素点集合中任一个；基于所述第一可见光像素点集合内的各个像素点的颜色值对所述第一超声像素点集合进行处理，得到所述超声图像对应的彩色超声图像。2.根据权利要求1所述的方法，其特征在于，提取所述可见光图像的处理对象，得到M个可见光像素点集合，包括：对所述可见光图像进行语义分割，输出每个像素点的属性；或者，对所述可见光图像和已获取的场景类别进行语义分割，输出每个像素点的属性；其中，所述场景类别对应多个属性，像素点的属性是所述多个属性中的一种；基于每个像素点的属性对所有像素点进行聚类得到M个可见光像素点集合；其中，对应同一属性的多个像素点被聚类到同一可见光像素点集合，对应不同属性的多个像素点被聚类到不同可见光像素点集合。3.根据权利要求1所述的方法，其特征在于，提取所述超声图像的处理对象，得到N个超声像素点集合，包括：对所述超声图像和已获取的场景类别进行语义分割，输出每个像素点的属性；所述场景类别对应多个属性，像素点的属性是所述多个属性中的一种；基于每个像素点的属性对所有像素点进行聚类得到N个超声像素点集合；其中，对应同一属性的多个像素点被聚类到同一超声像素点集合，对应不同属性的多个像素点被聚类到不同超声像素点集合。4.根据权利要求1所述的方法，其特征在于，所述基于所述第一可见光像素点集合内的各个像素点的颜色值对所述第一超声像素点集合进行处理，得到所述超声图像对应的彩色超声图像之前，所述方法还包括：若没有查找到第一超声像素点集合匹配的第一可见光像素点集合，则查找所述第一超声像素点集合对应的属性对应的固定颜色值，基于所述固定颜色值对所述第一超声像素点集合进行处理，得到所述超声图像对应的彩色超声图像；其中，预先配置有属性与固定颜色值之间的映射关系。5.根据权利要求1所述的方法，其特征在于，所述基于所述第一可见光像素点集合内的各个像素点的颜色值对所述第一超声像素点集合进行处理，得到所述超声图像对应的彩色超声图像，包括：基于所述第一可见光像素点集合内的各个像素点的颜色值，对所有像素点的颜色值进行聚类，得到K个聚类簇的中心颜色特征，K为正整数；
针对所述第一超声像素点集合内的每个像素点，基于该像素点在所述超声图像的灰度值和所述K个中心颜色特征，确定该像素点的目标颜色值；基于每个第一超声像素点集合内的各个像素点的目标颜色值对所述超声图像进行还原，得到所述超声图像对应的彩色超声图像。6.根据权利要求1所述的方法，其特征在于，所述基于所述第一可见光像素点集合内的各个像素点的颜色值对所述第一超声像素点集合进行处理，得到所述超声图像对应的彩色超声图像之后，所述方法还包括：显示所述彩色超声图像；或者，基于所述超声图像和所述彩色超声图像显示目标超声图像；其中，所述目标超声图像包括第一图像区域和第二图像区域，所述第一图像区域内各个像素点的像素值是来源于所述彩色超声图像的颜色值，所述第二图像区域内各个像素点的像素值是来源于所述超声图像的灰度值。7.根据权利要求6所述的方法，其特征在于，所述方法还包括：获取已配置的候选属性，并确定所述候选属性对应的超声像素点集合；将目标超声图像中该超声像素点集合内所有像素点对应的区域确定为第一图像区域，将目标超声图像中除第一图像区域之外的区域确定为第二图像区域；或，获取感兴趣区域，将目标超声图像中的感兴趣区域确定为第一图像区域，将目标超声图像中除第一图像区域之外的区域确定为...

【专利技术属性】
技术研发人员：刘恩毅，贺光琳，
申请(专利权)人：杭州海康慧影科技有限公司，
类型：发明
国别省市：