多模态影像的分析方法、计算机设备和存储介质技术

本申请涉及一种多模态影像的分析方法、计算机设备和存储介质，该方法包括：获取第一模态影像和第二模态影像；第一模态影像和第二模态影像为对同一受检部位进行扫描所得到的；将第一模态影像输入图像映射模型，得到第一映射影像，以及将第二模态影像输入图像映射模型，得到第二映射影像；其中，第一映射影像的分辨率高于第一模态影像的分辨率，第二映射影像的分辨率高于第二模态影像的分辨率；采用第一映射影像对第二映射影像进行重建，得到第三映射影像；基于第一映射影像和第三映射影像进行感兴趣区域的检测与分析，得到感兴趣区域的分析结果。该方法大大提高了病灶分析结果的准确性，可以为医生更好的提供手术辅助作用。可以为医生更好的提供手术辅助作用。可以为医生更好的提供手术辅助作用。

【技术实现步骤摘要】
多模态影像的分析方法、计算机设备和存储介质


[0001]本申请涉及图像处理
，特别是涉及一种多模态影像的分析方法、计算机设备和存储介质。

技术介绍

[0002]当前，脊柱疾病以其低龄化特点被作为“全球十大顽症”之一，越来越多的青少年和上班族患有脊柱疾病，如颈椎腰椎病变、骨关节炎、脊柱侧弯等。目前在骨科领域较前沿的治疗热点中，主要是重度脊柱侧凸畸形矫正、颈椎人工椎间盘置换技术、脊柱非融合技术和微创髋、膝关节置换、关节镜技术等手术的运用，其逐渐向减少创伤方向发展。
[0003]由于脊柱结构复杂，包括脊髓，神经根，大血管等结构，并且每个人的椎弓根形态都不同，因此在对脊柱疾病进行手术治疗前，需向医生提供精确的病灶信息，如病变的局部图像及周围组织，以供医生更好的分析病灶进行手术。传统技术中，通常是对多模态影像(如CT、MRI)提供2D的多平面(MPR)视图显示功能，以灰度图形式显示病灶信息。
[0004]但是，利用传统技术仍难以提供精准的病灶信息，对医生进行病灶分析的辅助效果不佳。

技术实现思路

[0005]基于此，有必要针对传统技术仍难以提供精准的病灶信息，对医生进行病灶分析的辅助效果不佳的问题，提供一种多模态影像的分析方法、计算机设备和存储介质。
[0006]一种多模态影像的分析方法，该方法包括：
[0007]获取第一模态影像和第二模态影像；第一模态影像和第二模态影像为对同一受检部位进行扫描所得到的；
[0008]将第一模态影像输入图像映射模型，得到第一映射影像，以及将第二模态影像输入图像映射模型，得到第二映射影像；其中，第一映射影像的分辨率高于第一模态影像的分辨率，第二映射影像的分辨率高于第二模态影像的分辨率；
[0009]采用第一映射影像对第二映射影像进行重建，得到第三映射影像；
[0010]基于第一映射影像和第三映射影像进行感兴趣区域的检测与分析，得到感兴趣区域的分析结果。
[0011]在其中一个实施例中，感兴趣区域包括脊柱病变区域；上述基于第一映射影像和第三映射影像进行感兴趣区域的检测与分析，得到感兴趣区域的分析结果，包括：
[0012]将第一映射影像和第三映射影像输入感兴趣区域分析模型，得到脊柱病变区域的分析结果；脊柱病变区域的分析结果包括病变位置和病变类型。
[0013]在其中一个实施例中，在得到脊柱病变区域的分析结果之后，上述方法还包括：
[0014]将脊柱病变区域以3D方式进行展示，并在展示界面上显示脊柱病变区域的分析结果。
[0015]在其中一个实施例中，在得到感兴趣区域的分析结果之后，上述方法还包括：
[0016]根据感兴趣区域的分析结果，对感兴趣区域和感兴趣区域的周围组织分别进行量化操作，得到感兴趣区域的量化结果和周围组织的量化结果。
[0017]在其中一个实施例中，上述方法还包括：
[0018]根据感兴趣区域的分析结果、感兴趣区域的量化结果和周围组织的量化结果，生成结构化分析文件；该结构化分析文件的数据格式包括可进行3D打印的数据格式；
[0019]将多模态影像的标识信息与结构化分析文件进行关联并存储。
[0020]在其中一个实施例中，上述方法还包括：
[0021]基于第一模态影像、第二模态影像、第一映射影像、第三映射影像、感兴趣区域的分析结果、感兴趣区域的量化结果、周围组织的量化结果以及结构化分析文件，建立术前档案数据库。
[0022]在其中一个实施例中，在建立术前档案数据库之后，上述方法还包括：
[0023]获取档案信息查询指令；该档案信息查询指令包括第一指令和第二指令，第一指令用于查询第一模态影像、第二模态影像、第一映射影像和第三映射影像中的至少一个，第二指令用于查询感兴趣区域的分析结果、感兴趣区域的量化结果、周围组织的量化结果和结构化分析文件中的至少一个；
[0024]根据档案信息查询指令，输出档案信息查询结果。
[0025]在其中一个实施例中，上述方法还包括：
[0026]从术前档案数据库中获取感兴趣区域的档案信息；
[0027]基于感兴趣区域的档案信息，确定针对受检对象的手术推荐方案以及手术推荐方案的评估结果。
[0028]一种多模态影像的分析装置，该装置包括：
[0029]获取模块，用于获取第一模态影像和第二模态影像；第一模态影像和第二模态影像为对同一受检部位进行扫描所得到的；
[0030]图像映射模块，用于将第一模态影像输入图像映射模型，得到第一映射影像，以及将第二模态影像输入图像映射模型，得到第二映射影像；其中，第一映射影像的分辨率高于第一模态影像的分辨率，第二映射影像的分辨率高于第二模态影像的分辨率；
[0031]重建模块，用于采用第一映射影像对第二映射影像进行重建，得到第三映射影像；
[0032]检测分析模块，用于基于第一映射影像和第三映射影像进行感兴趣区域的检测与分析，得到感兴趣区域的分析结果。
[0033]一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现以下步骤：
[0034]获取第一模态影像和第二模态影像；第一模态影像和第二模态影像为对同一受检部位进行扫描所得到的；
[0035]将第一模态影像输入图像映射模型，得到第一映射影像，以及将第二模态影像输入图像映射模型，得到第二映射影像；其中，第一映射影像的分辨率高于第一模态影像的分辨率，第二映射影像的分辨率高于第二模态影像的分辨率；
[0036]采用第一映射影像对第二映射影像进行重建，得到第三映射影像；
[0037]基于第一映射影像和第三映射影像进行感兴趣区域的检测与分析，得到感兴趣区域的分析结果。
Computed Tomography，PET)设备或其他医疗设备，分别用于采集患者的CT影像、MRI影像、PET影像或其他模态的医学影像，并将采集到的医学影像发送至计算机设备12。计算机设备12用于执行以下方法实施例中的步骤，以实现对多模态影像的分析处理过程。
[0054]在一个实施例中，提供了一种多模态影像的分析方法，以该方法应用于图1中的计算机设备为例进行说明，本实施例涉及的是计算机设备对第一模态影像和第二模态影像进行映射、重建、检测与分析的具体过程。如图2所示，该方法包括以下步骤：
[0055]S101，获取第一模态影像和第二模态影像；第一模态影像和第二模态影像为对同一受检部位进行扫描所得到的。
[0056]具体地，为使用多种模态的医学影像对患者受检部位进行病灶检测与分析，以提高得到的病灶信息的准确性，计算机设备可以获取对同一受检部位进行扫描所得到的第一模态影像和第二模态影像。其中，第一模态影像可以为CT影像，第二模态影像可以为MRI影像，当然，也可以为其他模态的医学影像。
[0057]可选地，该第一模态影像和第二模态影像可以由计算机设备直接从医学影像设备中获取；也可以先由医学本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种多模态影像的分析方法，其特征在于，所述方法包括：获取第一模态影像和第二模态影像；所述第一模态影像和所述第二模态影像为对同一受检部位进行扫描所得到的；将所述第一模态影像输入图像映射模型，得到第一映射影像，以及将所述第二模态影像输入所述图像映射模型，得到第二映射影像；其中，所述第一映射影像的分辨率高于所述第一模态影像的分辨率，所述第二映射影像的分辨率高于所述第二模态影像的分辨率；采用所述第一映射影像对所述第二映射影像进行重建，得到第三映射影像；基于所述第一映射影像和所述第三映射影像进行感兴趣区域的检测与分析，得到所述感兴趣区域的分析结果。2.根据权利要求1所述的方法，其特征在于，所述感兴趣区域包括脊柱病变区域；所述基于所述第一映射影像和所述第三映射影像进行感兴趣区域的检测与分析，得到感兴趣区域的分析结果，包括：将所述第一映射影像和所述第三映射影像输入感兴趣区域分析模型，得到所述脊柱病变区域的分析结果；所述脊柱病变区域的分析结果包括病变位置和病变类型。3.根据权利要求2所述的方法，其特征在于，在所述得到所述脊柱病变区域的分析结果之后，所述方法还包括：将所述脊柱病变区域以3D方式进行展示，并在展示界面上显示所述脊柱病变区域的分析结果。4.根据权利要求1所述的方法，其特征在于，在所述得到所述感兴趣区域的分析结果之后，所述方法还包括：根据所述感兴趣区域的分析结果，对所述感兴趣区域和所述感兴趣区域的周围组织分别进行量化操作，得到所述感兴趣区域的量化结果和所述周围组织的量化结果。5.根据权利要求4所述的方法，其特征在于，所述方法还包括：根据所述感兴趣区域的分析结果、所...

【专利技术属性】
技术研发人员：陈磊，薛忠，
申请(专利权)人：上海联影智能医疗科技有限公司，
类型：发明
国别省市：