一种荧光深度图像合成方法、装置、电子设备及存储介质制造方法及图纸

本申请提供了一种荧光深度图像合成方法、装置、电子设备及存储介质，涉及图像处理技术领域，其技术方案要点是：包括：获取对应的荧光图像以及深度图像；根据所述荧光图像以及所述深度图像计算得到透明度系数；根据所述透明度系数结合不同的背景颜色以及不同的前景颜色融合所述荧光图像以及所述深度图像得到融合图像，使所述融合图像以不同的颜色显示不同的深度信息。本申请提供的一种荧光深度图像合成方法、装置、电子设备及存储介质具有使器官组织图像的边缘更加清晰的优点。织图像的边缘更加清晰的优点。织图像的边缘更加清晰的优点。

【技术实现步骤摘要】
一种荧光深度图像合成方法、装置、电子设备及存储介质


[0001]本申请涉及图像处理
，具体而言，涉及一种荧光深度图像合成方法、装置、电子设备及存储介质。

技术介绍

[0002]现代医学影像在临床的应用日益广泛，为疾病的诊断、治疗提供大量生物组织特性相关的重要依据。其中，外科手术中的医学影像技术，可在手术过程中提供病灶相关结构和功能信息，辅助医生实现术前规划以及在术中进行实时引导和术后评估，提高了手术安全性和精准度。
[0003]相较于传统内窥镜摄像系统，AR荧光远程医疗手术导航系统可以将影像提供的病灶组织结构和功能信息累加至实际场景上，在人眼所能观察的实际生物组织上强化显示影像设备所捕获的组织结构信号、功能性分子显影信号，乃至远程医疗指导信号等。实施手术的医生无需在屏幕与手术区域频繁转换视线，同时通过远程医疗技术，可实现先进技术经验下沉至底层医院。
[0004]现有AR荧光远程医疗手术导航系统利用ICG成像原理，生成荧光图像，然后将荧光图像投射累加到人体上，但仅有亮度明暗变化的投影图像无法精确反馈人体器官和组织的沟壑深浅变化，以及无法清晰地区分边缘。例如A、B两处相邻，A处位置较浅但ICG浓度弱，B处位置较深且ICG浓度强，两者激发近红外荧光强度相同，则最终投影的荧光合成图像在A、B处会连成一片，无法区分组织的深浅变化。又例如，器官与背景脂肪组织相邻，但脂肪组织由于ICG扩散或者注射点错误等原因，导致近红外荧光显影，使得投射出的荧光合成图像渲染成一团，无法清晰区分器官的边缘。
[0005]针对上述问题，亟需进行解决。

技术实现思路

[0006]本申请的目的在于提供一种荧光深度图像合成方法、装置、电子设备及存储介质一种，具有使器官组织边缘的图像更加的优点。
[0007]第一方面，本申请提供了一种荧光深度图像合成方法，技术方案如下：包括：获取对应的荧光图像以及深度图像；根据所述荧光图像以及所述深度图像计算得到透明度系数；根据所述透明度系数结合不同的背景颜色以及不同的前景颜色融合所述荧光图像以及所述深度图像得到融合图像，使所述融合图像以不同的颜色显示不同的深度信息。
[0008]通过荧光图像和深度图像计算出透明度系数，然后利用透明度系数对二者进行融合得到融合图像，使融合图像带有深度变化的信息，并且，在融合图像过程，使用透明度系数和不同颜色的背景以及不同颜色的前景进行融合，得到的融合图像为伪彩图，利用伪彩图中色差的变化反映出器官组织不同的深浅信息，进而使不同的器官组织之间的边缘变得
清晰易区分，因此具有使器官组织边缘的图像更加的有益效果。
[0009]进一步地，在本申请中，所述根据所述荧光图像以及所述深度图像计算得到透明度系数的步骤包括：根据所述荧光图像计算得到荧光占比系数；根据所述荧光图像以及所述深度图像计算得到深度占比系数；根据所述荧光占比系数以及所述深度占比系数计算得到所述透明度系数。
[0010]进一步地，在本申请中，所述根据所述荧光图像以及所述深度图像计算得到深度占比系数的步骤包括：在所述荧光图像上，与所述深度图像对应的区域内的像素点的灰度值大于第一预设值时，读取所述深度图像中对应像素点的深度值；根据所述深度值计算得到所述深度占比系数。
[0011]当像素点的灰度值过小时，表明荧光的亮度比较弱，此时不再考虑深度占比系数，从而减少计算量，提高图像处理效率。
[0012]进一步地，在本申请中，根据所述荧光占比系数以及所述深度占比系数计算得到所述透明度系数的步骤包括：在所述荧光图像上，与所述深度图像对应的区域内的像素点的灰度值小于或等于所述第一预设值时，将所述荧光占比系数直接作为所述透明度系数。
[0013]进一步地，在本申请中，所述根据所述透明度系数结合不同的背景颜色以及不同的前景颜色融合所述荧光图像以及所述深度图像得到融合图像的步骤包括：根据所述透明度系数的取值，选取作为前景的颜色以及作为背景的颜色；根据所述透明度系数、所述选取作为前景的颜色以及所述选取作为背景的颜色计算得到所述融合图像。
[0014]利用不同的颜色作为背景和前景，使融合图像上的色差变化可以反映出深度的变化，有利于被人眼或设备识别。
[0015]进一步地，在本申请中，根据所述透明度系数的取值，选取作为前景的颜色以及作为背景的颜色的步骤包括：所述透明度系数大于0且小于第二预设值时，将黄色作为前景，将绿色作为背景；所述透明度系数大于或等于所述第二预设值且小于或等于第三预设值时，将绿色作为前景，将蓝色作为背景；所述透明度系数大于第三预设值且小于或等于1时，将蓝色作为前景，黑色作为背景。
[0016]进一步地，在本申请中，还包括：获取所述荧光图像与所述深度图像的帧率信息；根据所述帧率信息对所述荧光图像和/或所述深度图像进行处理，使所述荧光图像与所述深度图像的帧率保持一致。
[0017]第二方面，本申请还提供一种荧光深度图像合成装置，包括：获取模块，用于获取对应的荧光图像以及深度图像；第一处理模块，用于根据所述荧光图像以及所述深度图像计算得到透明度系数；第二处理模块，用于根据所述透明度系数结合不同的背景颜色以及不同的前景颜
色融合所述荧光图像以及所述深度图像得到融合图像，使所述融合图像以不同的颜色显示不同的深度信息。
[0018]第三方面，本申请还提供一种电子设备，包括处理器以及存储器，所述存储器存储有计算机可读取指令，当所述计算机可读取指令由所述处理器执行时，运行如上所述方法中的步骤。
[0019]第四方面，本申请还提供一种存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时，运行如上所述方法中的步骤。
[0020]由上可知，本申请提供的一种荧光深度图像合成方法、装置、电子设备及存储介质，通过荧光图像和深度图像计算出透明度系数，然后利用透明度系数对二者进行融合得到融合图像，使融合图像带有深度变化的信息，并且，在融合图像过程，使用透明度系数和不同颜色的背景以及不同颜色的前景进行融合，得到的融合图像为伪彩图，利用伪彩图中色差的变化反映出器官组织不同的深浅信息，进而使不同的器官组织之间的边缘变得清晰易区分，因此具有使器官组织边缘的图像更加的有益效果。
[0021]本申请的其他特征和优点将在随后的说明书阐述，并且，部分地从说明书中变得显而易见，或者通过实施本申请了解。本申请的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
附图说明
[0022]图1为本申请提供的一种荧光深度图像合成方法流程图。
[0023]图2为本申请提供的一种荧光深度图像合成装置示意图。
[0024]图3为本申请提供的一种电子设备示意图。
[0025]图中：210、获取模块；220、第一处理模块；230、第二处理模块；310、处理器；320、存储器。
具体实施方式
[0026]下面将结合本申请中附图，对本申请中的技术方案进行清楚、完整地描述，显然本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种荧光深度图像合成方法，其特征在于，包括：获取对应的荧光图像以及深度图像；根据所述荧光图像以及所述深度图像计算得到透明度系数；根据所述透明度系数结合不同的背景颜色以及不同的前景颜色融合所述荧光图像以及所述深度图像得到融合图像，使所述融合图像以不同的颜色显示不同的深度信息。2.根据权利要求1所述的一种荧光深度图像合成方法，其特征在于，所述根据所述荧光图像以及所述深度图像计算得到透明度系数的步骤包括：根据所述荧光图像计算得到荧光占比系数；根据所述荧光图像以及所述深度图像计算得到深度占比系数；根据所述荧光占比系数以及所述深度占比系数计算得到所述透明度系数。3.根据权利要求2所述的一种荧光深度图像合成方法，其特征在于，所述根据所述荧光图像以及所述深度图像计算得到深度占比系数的步骤包括：在所述荧光图像上，与所述深度图像对应的区域内的像素点的灰度值大于第一预设值时，读取所述深度图像中对应像素点的深度值；根据所述深度值计算得到所述深度占比系数。4.根据权利要求3所述的一种荧光深度图像合成方法，其特征在于，根据所述荧光占比系数以及所述深度占比系数计算得到所述透明度系数的步骤包括：在所述荧光图像上，与所述深度图像对应的区域内的像素点的灰度值小于或等于所述第一预设值时，将所述荧光占比系数直接作为所述透明度系数。5.根据权利要求1所述的一种荧光深度图像合成方法，其特征在于，所述根据所述透明度系数结合不同的背景颜色以及不同的前景颜色融合所述荧光图像以及所述深度图像得到融合图像的步骤包括：根据所述透明度系数的取值，选取作为前景的颜色以及作为背景的颜色；根据所述透明度系数、...

【专利技术属性】
技术研发人员：李明，麦晓杰，李志荣，张凌枫，刘满林，伍思樾，许广杰，任均宇，安昕，
申请(专利权)人：广东欧谱曼迪科技有限公司，
类型：发明
国别省市：