医学图像处理方法、装置、设备、介质以及内窥镜制造方法及图纸

公开了一种医学图像处理方法、装置、设备、介质以及内窥镜。所述医学图像处理方法包括：对所述医学图像执行目标检测，以确定所述医学图像中存在的目标对象的目标掩码以及具有参考尺寸的参考对象的参考掩码，其中所述目标掩码指示所述目标对象的位置和所述目标对象的边界，以及所述参考掩码指示所述参考对象的位置和所述参考对象的边界；基于所述目标掩码确定所述目标对象的特征尺寸；基于所述参考掩码确定所述参考对象的特征尺寸；基于所述参考对象的特征尺寸、所述目标对象的特征尺寸以及所述参考尺寸确定所述目标对象的目标尺寸，其中所述参考尺寸和所述参考对象的特征尺寸之间具有预定义的映射关系。

Medical image processing methods, devices, equipment, media and endoscopes

【技术实现步骤摘要】
医学图像处理方法、装置、设备、介质以及内窥镜
本申请涉及图像处理领域，更具体地涉及一种医学图像处理方法、装置、设备、介质以及内窥镜。
技术介绍
在利用医疗电子设备进行医学检查和操作的过程中，需要对医疗电子设备采集的医学图像进行处理，从而帮助用户了解到更多的信息。利用内窥镜这一类医疗电子设备，用户能够实时地观察到被检查的对象的生物组织的状态。例如，利用内窥镜能够进入被检查对象的体腔，例如消化道、肠道、气管等腔内并进行观察。
技术实现思路
根据本申请的一方面，提出了一种医学图像处理方法，包括：对所述医学图像执行目标检测，以确定所述医学图像中存在的目标对象的目标掩码以及具有参考尺寸的参考对象的参考掩码，其中所述目标掩码指示所述目标对象的位置和所述目标对象的边界，以及所述参考掩码指示所述参考对象的位置和所述参考对象的边界；基于所述目标掩码确定所述目标对象的特征尺寸；基于所述参考掩码确定所述参考对象的特征尺寸；基于所述参考对象的特征尺寸、所述目标对象的特征尺寸以及所述参考尺寸确定所述目标对象的目标尺寸，其中所述参考尺寸和所述参考对象的特征尺寸之间具有预定义的映射关系。在一些实施例中，对所述医学图像执行目标检测包括：利用MaskRCNN网络对所述医学图像进行处理，以确定所述医学图像中存在的目标对象的类型和所述目标对象的目标掩码，以及所述参考对象的类型和所述参考对象的目标掩码。在一些实施例中，基于所述目标掩码确定所述目标对象的特征尺寸包括：确定所述目标掩码中的两个目标特征点，其中所述两个目标特征点之间的距离指示所述目标掩码的最大尺寸；将所述两个目标特征点之间的距离确定为所述目标掩码的第一特征尺寸；将所述两个目标特征点中的一个目标特征点与所述医学图像的中心之间的距离确定为所述目标掩码的第二特征尺寸；以及将所述两个目标特征点中的另一个目标特征点与所述医学图像的中心之间的距离确定为所述目标掩码的第三特征尺寸。在一些实施例中，基于所述参考对象的特征尺寸、所述目标对象的特征尺寸以及所述参考尺寸确定所述目标对象的目标尺寸包括：基于所述参考尺寸和所述参考对象的特征尺寸确定用于所述映射关系的至少一个映射参数；以及利用所确定的映射参数，基于所述映射关系对所述目标尺寸的特征尺寸进行处理，以确定所述目标对象的目标尺寸。在一些实施例中，所述至少一个映射参数是通过以下步骤确定的：对利用至少一个医学图像确定的参考掩码的特征尺寸进行拟合，以确定所述至少一个映射参数。在一些实施例中，基于所述参考掩码确定所述参考对象的特征尺寸包括：确定所述参考掩码中的两个参考特征点，其中所述两个参考特征点之间的距离指示所述参考掩码中的最大尺寸；将所述两个参考特征点之间的距离确定为第一特征尺寸；将所述两个参考特征点中的一个参考特征点与该医学图像的中心之间的距离确定为第二特征尺寸；以及将所述两个参考特征点中的另一个参考特征点与该医学图像的中心之间的距离确定为第三特征尺寸。在一些实施例中，所述映射关系表示为多项式的形式，所述多项式包括至少一个变量，所述至少一个变量表示所述特征尺寸，所述映射参数指的是所述多项式中每一项的系数。在一些实施例中，在确定所述目标对象的目标尺寸之前，根据所述目标掩码和所述参考掩码确定所述医学图像是否符合预设条件，当所述医学图像符合预设条件时，基于所述参考对象的特征尺寸、所述目标对象的特征尺寸以及所述参考尺寸确定所述目标对象的目标尺寸。根据本申请的另一方面，还提供了一种医学图像处理装置，包括：目标检测单元，配置成对所述医学图像执行目标检测，以确定所述医学图像中存在的目标对象的目标掩码以及具有参考尺寸的参考对象的参考掩码，其中所述目标掩码指示所述目标对象的位置和所述目标对象的边界，以及所述参考掩码指示所述参考对象的位置和所述参考对象的边界；特征尺寸确定单元，配置成基于所述目标掩码确定所述目标对象的特征尺寸；基于所述参考掩码确定所述参考对象的特征尺寸；目标尺寸确定单元，配置成基于所述参考对象的特征尺寸、所述目标对象的特征尺寸以及所述参考尺寸确定所述目标对象的目标尺寸，其中所述参考尺寸和所述参考对象的特征尺寸之间具有映射关系，以及所述目标尺寸。在一些实施例中，所述目标检测单元配置成：利用MaskRCNN网络对所述医学图像进行处理，以确定所述医学图像中存在的目标对象的类型和所述目标对象的目标掩码，以及所述参考对象的类型和所述参考对象的目标掩码。在一些实施例中，所述特征尺寸确定单元配置成确定所述目标掩码中的两个目标特征点，其中所述两个目标特征点之间的距离指示所述目标掩码的最大尺寸；将所述两个目标特征点之间的距离确定为所述目标掩码的第一特征尺寸；将所述两个目标特征点中的一个目标特征点与所述医学图像的中心之间的距离确定为所述目标掩码的第二特征尺寸；以及将所述两个目标特征点中的另一个目标特征点与所述医学图像的中心之间的距离确定为所述目标掩码的第三特征尺寸。在一些实施例中，所述目标尺寸确定单元配置成：基于所述参考尺寸和所述参考对象的特征尺寸确定用于所述映射关系的至少一个映射参数；以及利用所确定的映射参数，基于所述映射关系对所述目标尺寸的特征尺寸进行处理，以确定所述目标对象的目标尺寸。在一些实施例中，所述至少一个映射参数是通过以下步骤确定的：对利用至少一个医学图像确定的参考掩码的特征尺寸进行拟合，以确定所述至少一个映射参数。在一些实施例中，所述特征尺寸确定单元配置成：确定所述参考掩码中的两个参考特征点，其中所述两个参考特征点之间的距离指示所述参考掩码中的最大尺寸；将所述两个参考特征点之间的距离确定为第一特征尺寸；将所述两个参考特征点中的一个参考特征点与该医学图像的中心之间的距离确定为第二特征尺寸；以及将所述两个参考特征点中的另一个参考特征点与该医学图像的中心之间的距离确定为第三特征尺寸。在一些实施例中，所述映射关系表示为多项式的形式，所述多项式包括至少一个变量，所述至少一个变量表示所述特征尺寸，所述映射参数指的是所述多项式中每一项的系数。在一些实施例中，所述医学图像处理装置还包括判断单元，所述判断单元配置成在确定所述目标对象的目标尺寸之前，根据所述目标掩码和所述参考掩码确定所述医学图像是否符合预设条件，当所述医学图像符合预设条件时，基于所述参考对象的特征尺寸、所述目标对象的特征尺寸以及所述参考尺寸确定所述目标对象的目标尺寸。根据本申请的又一方面，还提供了一种内窥镜，包括：图像采集单元，配置成采集医学图像；处理单元，配置成执行如前所述的方法，以确定所述医学图像中的目标对象的目标尺寸；以及输出单元，配置成输出所述目标对象的目标尺寸。在一些实施例中，所述图像采集单元配置成采集包括至少两个医学图像的视频流；以及所述处理单元配置成基于所述至少两个医学图像实时地确定所述目标对象的目标尺寸。根据本申请的又一方面，还提供了一种医学图像处理设备，包括：一个或多个处理器；和一个或多个存储器，其中，所述存储器中存储有计算机可读代码，所述计算机可读代码当由所述一个或多个处理器运本文档来自技高网...

【技术保护点】
1.一种医学图像处理方法，包括：/n对所述医学图像执行目标检测，以确定所述医学图像中存在的目标对象的目标掩码以及具有参考尺寸的参考对象的参考掩码，其中所述目标掩码指示所述目标对象的位置和所述目标对象的边界，以及所述参考掩码指示所述参考对象的位置和所述参考对象的边界；/n基于所述目标掩码确定所述目标对象的特征尺寸；/n基于所述参考掩码确定所述参考对象的特征尺寸；/n基于所述参考对象的特征尺寸、所述目标对象的特征尺寸以及所述参考尺寸确定所述目标对象的目标尺寸，/n其中所述参考尺寸和所述参考对象的特征尺寸之间具有预定义的映射关系。/n

【技术特征摘要】
1.一种医学图像处理方法，包括：
对所述医学图像执行目标检测，以确定所述医学图像中存在的目标对象的目标掩码以及具有参考尺寸的参考对象的参考掩码，其中所述目标掩码指示所述目标对象的位置和所述目标对象的边界，以及所述参考掩码指示所述参考对象的位置和所述参考对象的边界；
基于所述目标掩码确定所述目标对象的特征尺寸；
基于所述参考掩码确定所述参考对象的特征尺寸；
基于所述参考对象的特征尺寸、所述目标对象的特征尺寸以及所述参考尺寸确定所述目标对象的目标尺寸，
其中所述参考尺寸和所述参考对象的特征尺寸之间具有预定义的映射关系。


2.如权利要求1所述的方法，其中，对所述医学图像执行目标检测包括：
利用MaskRCNN网络对所述医学图像进行处理，以确定所述医学图像中存在的目标对象的类型和所述目标对象的目标掩码，以及所述参考对象的类型和所述参考对象的目标掩码。


3.如权利要求1所述的方法，其中，基于所述目标掩码确定所述目标对象的特征尺寸包括：
确定所述目标掩码中的两个目标特征点，其中所述两个目标特征点之间的距离指示所述目标掩码的最大尺寸；
将所述两个目标特征点之间的距离确定为所述目标掩码的第一特征尺寸；
将所述两个目标特征点中的一个目标特征点与所述医学图像的中心之间的距离确定为所述目标掩码的第二特征尺寸；以及
将所述两个目标特征点中的另一个目标特征点与所述医学图像的中心之间的距离确定为所述目标掩码的第三特征尺寸。


4.如权利要求1-3任一项所述的方法，其中基于所述参考对象的特征尺寸、所述目标对象的特征尺寸以及所述参考尺寸确定所述目标对象的目标尺寸包括：
基于所述参考尺寸和所述参考对象的特征尺寸确定用于所述映射关系的至少一个映射参数；以及
利用所确定的映射参数，基于所述映射关系对所述目标尺寸的特征尺寸进行处理，以确定所述目标对象的目标尺寸。


5.如权利要求4所述的方法，其中所述至少一个映射参数是通过以下步骤确定的：
对利用至少一个医学图像确定的参考掩码的特征尺寸进行拟合，以确定所述至少一个映射参数。


6.如权利要求1所述的方法，其中，基于所述参考掩码确定所述参考对象的特征尺寸包括：
确定所述参考掩码中的两个参考特征点，其中所述两个参考特征点之间的距离指示所述参考掩码中的最大尺寸；
将所述两个参考特征点之间的距离确定为第一特征尺寸；
将所述两个参考特征点中的一个参考特征点与该医学图像的中心之间的距离确定为第二特征尺寸；以及
将所述两个参考特征点中的另一个参考特征点与该医学图像的中心之间的距离确定为第三特征尺寸。


7.如权利要求4所述的方法，其中，所述映射关系表示为多项式的形式，所述多项式包括至少一个变量，所述至少一个变量表示所述特征尺寸，所述映射参数指的是所述多项式中每一项的系数。


...

【专利技术属性】
技术研发人员：付星辉，郑瀚，邱俊文，尚鸿，孙钟前，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：广东;44