一种3D-2D血管图像的匹配方法及装置制造方法及图纸

本申请提供了一种3D

【技术实现步骤摘要】
一种3D
‑
2D血管图像的匹配方法及装置


[0001]本申请涉及医学图像处理
，尤其是涉及一种3D
‑
2D血管图像的匹配方法及装置。

技术介绍

[0002]目前，PCI技术已成为治疗冠心病心肌缺血的主要方法。在血管介入手术(PCI)中，医生通常使用实时的2D造影图像(如DSA)作为术中导管的引导图像。然而，由于2D造影图像的投影本质，血管的迂曲和重叠等因素使得医生在手术中难以清晰和直观地进行介入方式和治疗方案的精准决策。术前的CTA可以通过三维重建直观、立体地呈现血管的走形和病灶位置等信息，弥补了这种缺陷。因此，在血管介入手术中，通过融合实时的2D造影图像和3D的CTA图像，可以极大地提高医生手术的成功率，防止患者手术中并发症事件的发生。
[0003]当前的3D/2D血管图像配准技术通常用于未发生弹性形变的解剖结构，例如骨骼或脑血管，这意味着只实现了刚性配准。然而，对于冠状动脉和肝脏等器官，由于患者的呼吸和心跳等因素的影响，会发生弹性形变。因此，上述的刚性配准方法将不再适用于这类的血管介入手术。

技术实现思路

[0004]有鉴于此，本申请的目的在于提供一种3D
‑
2D血管图像的匹配方法及装置，可实现3D血管图像与2D血管图像之间的有效配准。
[0005]本申请实施例提供了一种3D
‑
2D血管图像的匹配方法，所述匹配方法包括：
[0006]获取第一中心线图像和第二中心线图像；其中，所述第一中心线图像为对待匹配的3D血管图像依次进行中心线提取处理、旋转处理以及投影处理后所得到的图像，所述第二中心线图像为对待匹配的2D血管图像进行中心线提取处理后得到的图像；
[0007]分别对所述第一中心线图像和所述第二中心线图像上的中心线进行点云提取处理，确定所述第一中心线图像的第一点云集和所述第二中心线图像的第二点云集；
[0008]通过预先训练好的血管类型识别模型，分别对所述第一点云集和第二点云集中的点进行识别，确定每个点的血管类型标签；
[0009]根据每个点的血管类型标签，对第一中心线图像和第二中心线图像中的每种血管的中心线，进行断线识别处理以及对识别出的中断中心线进行断线连接处理，得到所述第一中心线图像的第三点云集和所述第二中心线图像的第四点云集；
[0010]分别对所述第三点云集和所述第四点云集进行关键点识别，并分别根据每个点云集识别出的关键点建立所述第一中心线图像的第一树形拓扑图和所述第二中心线图像的第二树形拓扑图；其中，所述关键点包括端点和分叉点；
[0011]基于所述第一树形拓扑图和所述第二树形拓扑图，根据拓扑排序以及距离约束进行关键点配对，完成所述3D血管图像和所述2D血管图像的匹配。
[0012]可选的，通过以下步骤确定所述第一中心线图像：
[0013]获取目标患者的目标患处的所述3D血管图像和所述2D血管图像；
[0014]对所述3D血管图像进行中心线提取处理，确定所述3D血管图像的第三中心线图像；
[0015]基于所述3D血管图像和所述2D血管图像，确定所述3D血管图像与所述2D血管图像之间的成像偏移角度；
[0016]控制所述第三中心线图像按所述成像偏移角度进行旋转，并对旋转完成的第三中心线图像进行数字重建投影处理，确定所述3D血管图像的所述第一中心线图像；所述第一中心线图像为2D图像。
[0017]可选的，所述根据每个点的血管类型标签，对第一中心线图像和第二中心线图像中的每种血管的中心线，进行断线识别处理以及对识别出的中断中心线进行断线连接处理，得到所述第一中心线图像的第三点云集和所述第二中心线图像的第四点云集，包括：
[0018]根据每个点的血管类型标签，依次将所述第一中心线图像和所述第二中心线图像中的同一血管类型标签的点的像素设置为1，其余点的像素设置为0，得到所述第一中心线图像和所述第二中心线图像中每种血管的中心线的二值图像；
[0019]针对每个二值图像进行连通域检测，确定该二值图像中的连通域数量是否超过阈值；
[0020]若超过，确定该二值图像中的中心线存在中断；
[0021]针对中心线存在中断的二值图像进行断线连接处理，更新该二值图像；所述断线连接处理为对中断的中心线进行连接，使该二值图像的连通域数量不超过阈值；
[0022]根据已进行断线识别处理以及对识别出的中断中心线进行断线连接处理的所有对应的二值图像，得到更新后的所述第一中心线图像和更新后的所述第二中心线图像；
[0023]根据更新后的所述第一中心线图像和更新后的所述第二中心线图像，得到所述第三点云集和所述第四点云集。
[0024]可选的，所述针对中心线存在中断的二值图像进行断线连接处理，更新该二值图像，包括：
[0025]针对每个中心线存在中断的二值图像，针对该二值图像中的每相邻两个连通域，选取最近的两个端点作为待连接点；
[0026]基于确定出的多个待连接点，生成至少一个连接路径；
[0027]将所述至少一个连接路径和二值图像中的连通域进行对应拼接，得到中断连接处理后的二值图像，完成二值图像的更新。
[0028]可选的，所述分别对所述第三点云集和所述第四点云集进行关键点识别，并分别根据每个点云集识别出的关键点建立所述第一中心线图像的第一树形拓扑图和所述第二中心线图像的第二树形拓扑图，包括：
[0029]根据每个点的血管类型标签和每个点的坐标，确定第三点云集中的主支起点和第四点云集中的主支起点；
[0030]针对每个点云集，从该点云集的主支起点开始，依次遍历该点云集中的每个点，并根据每个点的邻点数量，确定该点的点类型；其中，所述点类型包括端点、分叉点以及中间点；
[0031]将点类型为端点和分叉点的点确定为子节点；
[0032]基于确定出的子节点和该点云集，构建对应的树形拓扑图。
[0033]可选的，所述分别对所述第一中心线图像和所述第二中心线图像上的中心线进行点云提取处理，确定所述第一中心线图像的第一点云集和所述第二中心线图像的第二点云集，包括：
[0034]针对所述第一中心线图像和所述第二中心线图像，分别提取该图像中血管中心线的所有点的前景位置坐标；
[0035]针对所述第一中心线图像和所述第二中心线图像中的每个图像，对该图像对应的所有点的前景位置坐标进行归一化处理，得到该图像的点云集。
[0036]可选的，通过以下步骤构建所述血管类型识别模型：
[0037]获取多张已进行点云提取处理以及对点云中的每个点添加有真实血管类型标签的待训练中心线图像；
[0038]将所述待训练中心线图像输入初始血管类型识别神经网络中，确定待训练中心线图像中每个点血管类型预测结果；
[0039]基于每个点血管类型预测结果和真实血管类型标签，确定目标损失函数值；
[0040]基于所述目标损失函数值，对所述初本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种3D
‑
2D血管图像的匹配方法，其特征在于，所述匹配方法包括：获取第一中心线图像和第二中心线图像；其中，所述第一中心线图像为对待匹配的3D血管图像依次进行中心线提取处理、旋转处理以及投影处理后所得到的图像，所述第二中心线图像为对待匹配的2D血管图像进行中心线提取处理后得到的图像；分别对所述第一中心线图像和所述第二中心线图像上的中心线进行点云提取处理，确定所述第一中心线图像的第一点云集和所述第二中心线图像的第二点云集；通过预先训练好的血管类型识别模型，分别对所述第一点云集和第二点云集中的点进行识别，确定每个点的血管类型标签；根据每个点的血管类型标签，对第一中心线图像和第二中心线图像中的每种血管的中心线，进行断线识别处理以及对识别出的中断中心线进行断线连接处理，得到所述第一中心线图像的第三点云集和所述第二中心线图像的第四点云集；分别对所述第三点云集和所述第四点云集进行关键点识别，并分别根据每个点云集识别出的关键点建立所述第一中心线图像的第一树形拓扑图和所述第二中心线图像的第二树形拓扑图；其中，所述关键点包括端点和分叉点；基于所述第一树形拓扑图和所述第二树形拓扑图，根据拓扑排序以及距离约束进行关键点配对，完成所述3D血管图像和所述2D血管图像的匹配。2.根据权利要求1所述的匹配方法，其特征在于，通过以下步骤确定所述第一中心线图像：获取目标患者的目标患处的所述3D血管图像和所述2D血管图像；对所述3D血管图像进行中心线提取处理，确定所述3D血管图像的第三中心线图像；基于所述3D血管图像和所述2D血管图像，确定所述3D血管图像与所述2D血管图像之间的成像偏移角度；控制所述第三中心线图像按所述成像偏移角度进行旋转，并对旋转完成的第三中心线图像进行数字重建投影处理，确定所述3D血管图像的所述第一中心线图像；所述第一中心线图像为2D图像。3.根据权利要求1所述的匹配方法，其特征在于，所述根据每个点的血管类型标签，对第一中心线图像和第二中心线图像中的每种血管的中心线，进行断线识别处理以及对识别出的中断中心线进行断线连接处理，得到所述第一中心线图像的第三点云集和所述第二中心线图像的第四点云集，包括：根据每个点的血管类型标签，依次将所述第一中心线图像和所述第二中心线图像中的同一血管类型标签的点的像素设置为1，其余点的像素设置为0，得到所述第一中心线图像和所述第二中心线图像中每种血管的中心线的二值图像；针对每个二值图像进行连通域检测，确定该二值图像中的连通域数量是否超过阈值；若超过，确定该二值图像中的中心线存在中断；针对中心线存在中断的二值图像进行断线连接处理，更新该二值图像；所述断线连接处理为对中断的中心线进行连接，使该二值图像的连通域数量不超过阈值；根据已进行断线识别处理以及对识别出的中断中心线进行断线连接处理的所有对应的二值图像，得到更新后的所述第一中心线图像和更新后的所述第二中心线图像；根据更新后的所述第一中心线图像和更新后的所述第二中心线图像，得到所述第三点
云集和所述第四点云集。4.根据权利要求3所述的匹配方法，其特征在于，所述针对中心线存在中断的二值图像进行断线连接处理，更新该二值图像，包括：针对每个中心线存在中断的二值图像，针对该二值图像中的每相邻两个连通域，选取最近的两个端点作为待连接点；基于确定出的多个待连接点，生成至少一个连接路径；将所述至少一个连接路径和二值图像中的连通域进行对应拼接，得到中断连接处理后的二值图像，完成二值图像的更新。5.根据权利要求1所述的匹配方法，其特征在于，所述分别对所述第三点云集和所述第四点云集进行...

【专利技术属性】
技术研发人员：刘振东，马骏，郑凌霄，兰宏志，
申请(专利权)人：深圳睿心智能医疗科技有限公司，
类型：发明
国别省市：