图像处理方法、装置、电子设备及介质制造方法及图纸

本公开实施例提供了一种图像处理方法、装置、电子设备及介质。该图像处理方法包括获得乳腺断层影像，该乳腺断层影像包括由多个影像组成的第一体位影像序列和第二体位影像序列；以乳头位置为原点建立坐标系；经过旋转、长度归一化的操作统一不同体位下的乳腺断层影像中的坐标系，以建立不同体位影像序列中的位置映射。映射。映射。

Image processing method, device, electronic equipment and medium

【技术实现步骤摘要】
图像处理方法、装置、电子设备及介质


[0001]本说明书涉及计算机视觉
，尤其涉及一种图像处理方法、装置、电子设备及介质。

技术介绍

[0002]在医学成像领域中，经常显示来自患者的医学图像序列。计算机断层摄影，例如乳腺断层影像(DBT，Digital Breast Tomosynthesis)，可以提供患者乳房结构或组织的三维重建，可以将三维重建显示为二维截面的序列。同一乳腺可以在不同体位的状态下进行拍摄，以避免漏检或判断不清的情况。头足轴位(CC)和内外侧斜位(MLO)都是乳腺摄影的常规体位。如果能够提供不同体位之间的位置映射关系，将对临床工作提供很大帮助。
[0003]CN112561908A公开了一种病灶匹配方法，对不同体位的单张二维影像中的病灶进行位置匹配。然而，二维影像中缺乏三维信息，只能在病灶之间尝试匹配，无法构建完善的位置映射关系，结果可靠性不足。

技术实现思路

[0004]为解决相关技术中的问题，本公开实施例提供了一种图像处理方法、装置、电子设备及介质。
[0005]本公开的一个方面提供了一种图像处理方法，包括：获得乳腺断层影像，所述乳腺断层影像包括由多个影像组成的第一体位影像序列和第二体位影像序列；以乳头位置为原点，基于第一体位影像序列建立第一坐标系，基于第二体位影像序列建立第二坐标系；检测所述第二体位影像序列中胸大肌的位置以确定第一旋转角，并基于所述第一旋转角旋转所述第二坐标系，得到第三坐标系；基于所述第一体位影像序列和第二体位影像序列，根据所述第一坐标系在三个坐标轴方向的单位长度，对所述第三坐标系在三个坐标轴方向的单位长度归一化，得到第四坐标系；基于第二旋转角旋转所述第四坐标系，得到第五坐标系，所述第二旋转角为第一体位和第二体位乳腺断层影像的拍摄方向之间的夹角，所述第五坐标系用于建立所述第一体位影像序列和第二体位影像序列中的位置映射。
[0006]本公开的另一个方面提供了一种图像处理装置，包括获得模块、建立模块、第一旋转模块、长度变换模块和第二旋转模块。其中，获得模块，被配置为获得乳腺断层影像，所述乳腺断层影像包括由多个影像组成的第一体位影像序列和第二体位影像序列。建立模块，被配置为以乳头位置为原点，基于第一体位影像序列建立第一坐标系，基于第二体位影像序列建立第二坐标系。第一旋转模块，被配置为检测所述第二体位影像序列中胸大肌的位置以确定第一旋转角，并基于所述第一旋转角旋转所述第二坐标系，得到第三坐标系。长度变换模块，被配置为基于所述第一体位影像序列和第二体位影像序列，根据所述第一坐标系在三个坐标轴方向的单位长度，对所述第三坐标系在三个坐标轴方向的单位长度归一化，得到第四坐标系。第二旋转模块，被配置为基于第二旋转角旋转所述第四坐标系，得到第五坐标系，所述第二旋转角为第一体位和第二体位乳腺断层影像的拍摄方向之间的夹
角，所述第五坐标系用于建立所述第一体位影像序列和第二体位影像序列中的位置映射。
[0007]本公开的另一个方面提供了一种电子设备，包括至少一个处理器以及与所述至少一个处理器通信连接的存储器，其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行：获得乳腺断层影像，所述乳腺断层影像包括由多个影像组成的第一体位影像序列和第二体位影像序列；以乳头位置为原点，基于第一体位影像序列建立第一坐标系，基于第二体位影像序列建立第二坐标系；检测所述第二体位影像序列中胸大肌的位置以确定第一旋转角，并基于所述第一旋转角旋转所述第二坐标系，得到第三坐标系；基于所述第一体位影像序列和第二体位影像序列，根据所述第一坐标系在三个坐标轴方向的单位长度，对所述第三坐标系在三个坐标轴方向的单位长度归一化，得到第四坐标系；基于第二旋转角旋转所述第四坐标系，得到第五坐标系，所述第二旋转角为第一体位和第二体位乳腺断层影像的拍摄方向之间的夹角，所述第五坐标系用于建立所述第一体位影像序列和第二体位影像序列中的位置映射。
[0008]本公开的另一个方面提供了一种计算机可读存储介质，存储有计算机可读指令，所述指令在被处理器执行时用于实现如上所述的图像处理方法。
[0009]本公开的另一个方面提供了一种计算机程序，所述计算机程序包括计算机可执行指令，所述指令在被执行时用于实现如上所述的图像处理方法。
[0010]本公开实施例提供的图像处理方法，以乳头位置为原点，基于第一体位影像序列建立第一坐标系，基于第二体位影像序列建立第二坐标系，并经过旋转、长度归一化、再旋转，统一两个坐标系，用于建立第一体位影像序列和第二体位影像序列中的位置映射，从而为临床工作提供辅助信息。
附图说明
[0011]结合附图，通过以下非限制性实施方式的详细描述，本公开的其它特征、目的和优点将变得更加明显。在附图中：
[0012]图1示意性示出应用本公开实施例的图像处理方法的系统架构示意图；
[0013]图2示意性示出本公开实施例的图像处理方法的流程图；
[0014]图3A示意性示出本公开实施例的MLO体位的乳腺影像的示意图；
[0015]图3B示意性示出本公开实施例的CC体位的乳腺影像的示意图；
[0016]图4示意性示出本公开实施例的坐标轴长度归一化的流程图；
[0017]图5示意性示出本公开实施例的病灶区域图像预测的流程图；
[0018]图6示意性示出本公开实施例的病灶区域图像预测过程的示意图；
[0019]图7示意性示出本公开实施例的图像处理装置的框图；以及
[0020]图8示意性示出适于实现本公开实施例的图像处理方法和装置的计算机系统的结构示意图。
具体实施方式
[0021]下文中，将参考附图详细描述本公开的示例性实施例，以使本领域技术人员可容易地实现它们。此外，为了清楚起见，在附图中省略了与描述示例性实施例无关的部分。
[0022]在本公开中，应理解，诸如“包括”或“具有”等的术语旨在指示本说明书中所公开的特征、数字、步骤、行为、部件、部分或其组合的存在，并且不欲排除一个或多个其他特征、数字、步骤、行为、部件、部分或其组合存在或被添加的可能性。
[0023]另外还需要说明的是，在不冲突的情况下，本公开中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本公开。
[0024]应当注意的是，本公开中数据的获取或展示均经用户授权、确认、或由用户主动选择。
[0025]本公开的实施例提供了一种图像处理方法，以乳头位置为原点，基于第一体位影像序列建立第一坐标系，基于第二体位影像序列建立第二坐标系，并经过旋转、长度归一化、再旋转，统一两个坐标系，用于建立第一体位影像序列和第二体位影像序列中的位置映射，从而为临床工作提供辅助信息。
[0026]以下结合附图，详细说明本公开各实施例提供的技术方案。
[0027]图1示意性示出应用本公开实施例的图像处理方法的系统架构示意图。
[本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法，包括：获得乳腺断层影像，所述乳腺断层影像包括由多个影像组成的第一体位影像序列和第二体位影像序列；以乳头位置为原点，基于第一体位影像序列建立第一坐标系，基于第二体位影像序列建立第二坐标系；检测所述第二体位影像序列中胸大肌的位置以确定第一旋转角，并基于所述第一旋转角旋转所述第二坐标系，得到第三坐标系；基于所述第一体位影像序列和第二体位影像序列，根据所述第一坐标系在三个坐标轴方向的单位长度，对所述第三坐标系在三个坐标轴方向的单位长度归一化，得到第四坐标系；基于第二旋转角旋转所述第四坐标系，得到第五坐标系，所述第二旋转角为第一体位和第二体位乳腺断层影像的拍摄方向之间的夹角，所述第五坐标系用于建立所述第一体位影像序列和第二体位影像序列中的位置映射。2.根据权利要求1所述的方法，其中，所述三个坐标轴方向包括深度方向、宽度方向和高度方向，所述深度方向为所述乳腺断层影像中从乳头到胸大肌的方向，所述宽度方向为所述乳腺断层影像平面内垂直于所述深度方向的方向，所述高度方向为垂直于所述乳腺断层影像平面的方向，所述基于所述第一体位影像序列和第二体位影像序列，根据所述第一坐标系在三个坐标轴方向的单位长度，对所述第三坐标系在三个坐标轴方向的单位长度归一化，得到第四坐标系包括：基于第一体位影像序列和第二体位影像序列中乳头到胸大肌的距离，以及第一坐标系在深度方向的单位长度，调整第三坐标系在第一坐标轴方向的单位长度；基于第一体位影像序列和第二体位影像序列中乳房的宽度，以及第一坐标系在宽度方向的单位长度，调整第三坐标系在宽度方向的单位长度；基于第一体位影像序列和第二体位影像序列的影像层数，以及第一坐标系在高度方向的单位长度，调整第三坐标系在高度方向的单位长度。3.根据权利要求1或2所述的方法，还包括：获得多个病灶区域图像以及每个所述病灶区域图像在所述乳腺断层影像中的位置信息，所述多个病灶区域图像包括来自第一体位影像序列的病灶区域图像和来自第二体位影像序列的病灶区域图像；分别提取所述病灶区域图像的第一图像特征；基于所述第一坐标系和第五坐标系对所述位置信息进行位置编码，得到位置特征；融合所述第一图像特征和位置特征，得到第二图像特征；将来自第一体位影像序列的病灶区域图像产生的第二图像特征分为第一组，将来自第二体位影像序列的病灶区域图像产生的第二图像特征分为第二组，通过交叉注意力单元处理所述第一组和第二组的第二图像特征，得到第三图像特征；基于所述第三图像特征确定所述病灶区域图像的类别预测信息。4.根据权利要求3所述的方法，还包括：基于所述第三图像特征确定所述病灶区域图像的位置预测信息。
5.一种图像处理装置，包括：获得模块，被配置为获得乳腺断层影像，所述乳腺断层影像包括由多个影像组成的第一体位影像序列和第二体位影像序列；建立模块，被配置为以乳头位置为原点，基于第一体位影像序列建立第一坐标系，基于第二体位影像序列建立第二坐标系；第一旋转模块，被配置为检测所述第二体位影像序列中胸大肌的位置以确定第一旋转角，并基于所述第一旋转角旋转所述第二坐标系，得到第三坐标系；长度变换模块，被配置为基于所述第一体位影像序列和第二体位影像序列，根据所述第一坐标系在三个坐标轴方向的单位长度，对所述第三坐标系在三个坐标轴方向的单位长度归一化，得到第四坐标系；第二旋转模块，被配置为基于第二旋转角旋转所述第四坐标系，得到第五坐标系，所述第二旋转角为第一体位和第二体位乳腺断层影像的拍摄方向之间的夹角，所述第五坐标系用于建立所述第一体位影像序列和第二体位影像序列中的位置映射。6.一种电子设备，包括：至少一个处理器；以及，与所述至少一个处理器通信连接的存储器；其中，所述存储器存储...

【专利技术属性】
技术研发人员：王子腾，张可欣，丁佳，吕晨翀，
申请(专利权)人：北京医准智能科技有限公司，
类型：发明
国别省市：