一种腹腔镜手术视频帧率自适应的实时去烟雾方法技术

一种腹腔镜手术视频帧率自适应的实时去烟雾方法，包括步骤：获取腹腔镜手术视频的帧率；对视频进行帧率自适应采样；利用暗通道先验去雾原理，获得暗通道图、估计大气光照系数和估计透射率图；利用暗通道图、大气光照系数、透射率图，求解雾图成像模型的方程，获得去雾图像；将去雾图像实时输出形成去雾视频。对高帧率视频进行隔帧采样，大幅减少了需要处理的数据量；通过指针操作符访问储存在内存空间的图像，能够对数据进行高速读写；对暗通道图进行中值滤波处理，能够更好的保存图像边缘；求得透射率图后，将透射率图归一化，保证后续雾图成像方程的求解为整型数运算，解决了暗通道先验去雾方法中透射率图大量浮点运算导致算法时间大幅增加的问题。

【技术实现步骤摘要】
一种腹腔镜手术视频帧率自适应的实时去烟雾方法
本专利技术涉及数字图像处理
，具体涉及一种腹腔镜手术视频帧率自适应的实时去烟雾方法。
技术介绍
腹腔镜手术是一门新发展起来的微创方法，是未来手术方法发展的一个必然趋势。它是电子、光学、摄像等高科技技术在临床手术中应用的典范，具有创伤小、并发症少、安全、康复快的特点，近几年来，外科腔镜手术发展很快，可同时检查和治疗，是目前最先进、最尖端的微创技术。在治疗外科疾病中的作用已越来越受到人们的瞩目。并在国际上呈风靡性发展。腹腔镜手术使用冷光源提供照明，将腹腔镜镜头(直径为3-10mm)插入腹腔内，运用数字摄像技术使腹腔镜镜头拍摄到的图像通过光导纤维传导至后级信号处理系统，并且实时显示在专用监视器上。然后医生通过监视器屏幕上所显示患者器官不同角度的图像，对病人的病情进行分析判断，并且运用特殊的腹腔镜器械进行手术。而高温切割器械是进行腹腔镜手术时最常见的一种器械，它在切割人体组织时会产生明显的固体颗粒状的烟，同时使腹腔内气体温度上升，遇到温度较低的腹腔镜镜片时，会产生腹腔镜镜片起雾(Laparoscopiclensfogging，LLF)，严重阻挡医生的手术视野，常常令手术需要暂停，相当于外科医生突然失去视力，大大影响了手术的流畅度，甚至有时引起不必要的医疗安全问题。目前的研究表明提高腹腔镜视野清晰度的方法大致可分为四类：a)物理方法加温腹腔镜；b)防雾溶液的物理擦拭；c)腹腔镜设备的材料技术革新；d)组织擦拭。上述方法基本都属于物理去雾方法，大量的时间耗费在保持手术视野的清晰上，使手术变得冗长，并且效果有限，而且往往费时，成本高，并且没有足够的数据来支持其改善的效果。而将利用计算机的强大运算能力，将数字图像处理运用于视频去雾具有成本低、操作简单的特点。对于单帧图像，暗通道先验去雾是数字图像去雾的常用算法。它通过求取原图像的暗通道矩阵、大气光照成分，估计原图的透射率矩阵，最后由雾图成像模型计算求得去雾图。为了获取更加精细的透射率矩阵，通常采用导向滤波的方法。然而这个过程中包含很多浮点运算，所以处理图像的速度比较慢，难以满足近些年腹腔镜手术高分辨率视频实时去雾的要求。由于硬件设备的升级，近些年腹腔镜手术视频的分辨率普遍为1920*1080，所以优化暗通道先验去雾算法，实现高分辨率视频的实时去雾，构建一套数字化去雾系统，将处理后的清晰图像实时显示，能够给医生的腹腔镜手术带来极大的便利，降低手术风险。因此这样的一套实时去雾方法是很有必要的。
技术实现思路
针对腹腔镜手术视频的去烟雾方法中图像处理速度慢、实时性低、且获取的图像精度低的问题，本申请提供一种腹腔镜手术视频帧率自适应的实时去烟雾方法，包括步骤：获取腹腔镜手术视频的帧率；对视频进行帧率自适应采样，获得原含雾图像；将原含雾图像通过暗通道先验去雾原理计算后获得暗通道图像，并根据暗通道先验去雾原理估计暗通道图像的大气光照系数和透射率图；利用原含雾图像、暗通道图、大气光照系数和透射率图求解雾图成像模型方程，获得去雾图像；将去雾图像实时输出形成去雾后的视频。一种实施例中，对视频进行帧率自适应采样，具体是：判断帧率是否大于25FPS，若大于，对所述帧率视频进行隔帧采样，否则，对所述帧率视频进行逐帧采样。一种实施例中，通过指针操作符遍历储存在内存空间的原含雾图像、暗通道图和透射率图。一种实施例中，将原含雾图像通过暗通道先验去雾原理计算之前还包括对采样帧的原含雾图像进行降采样的步骤。一种实施例中，将原含雾图像通过暗通道先验去雾原理计算后获得暗通道图的过程中包括步骤：对暗通道图进行中值滤波处理。一种实施例中，在多核条件下，采用多个中值滤波器对暗通道图并行处理。一种实施例中，中值滤波器的滤波窗口的大小为3像素*3像素。一种实施例中，获得透射率之前还包括对透射率图进行归一化处理。一种实施例中，求解雾图成像方程，获得去雾图像，包括步骤：对原含雾图像进行降采样；将降采样后的原含雾图像、大气光照系数和透射率图通过求解雾图成像模型方程，获得去雾图像。一种实施例中，将去雾图像实时输出形成去雾视频之前还包括对去雾图像进行放大插值处理的步骤。依据上述实施例的实时去烟雾方法，对视频进行帧率自适应采样，对低帧率视频进行逐帧采样，对高帧率视频进行隔帧采样，并对采样帧的原含雾图像进行降采样，大幅减少了需要处理的数据量，进一步，提升了去烟雾的实时性。另外，通过指针操作符访问储存在内存空间的图像，能够对数据进行高速读写，大大降低程序运行时间。另外，对暗通道图进行中值滤波处理，与最小值滤波相比，能够更好的保存图像边缘，将滤波窗口设置为3像素*3像素，保证了暗通道图的精细程度，也保证了由暗通道计算所得透射率图的精细程度，腹腔镜手术中手术刀高温切割所形成的组织烟尘颗粒较小，图像特征与椒盐噪声近似，可利用3像素*3像素窗口大小的中值滤波剔除。另外，求解透射率图后，将透射率图归一化到8比特灰度范围内，使得后续雾图成像模型方程的求解为整型数运算，解决了暗通道先验去雾方法中透射率图大量浮点运算导致算法时间大幅增加的问题；附图说明图1为腹腔镜手术视频的实时去烟雾流程图；图2为腹腔镜手术视频帧率自适应的实时去烟雾细节流程图。具体实施方式下面通过具体实施方式结合附图对本专利技术作进一步详细说明。本例提供一种腹腔镜手术视频的实时去烟雾方法，其流程图如图1所示，包括如下具体步骤。S1：获取腹腔镜手术视频的帧率。医院实际应用的腹腔镜手术视频的帧率有25FPS和50FPS两种，本例获取腹腔镜手术视频的帧率后对视频进行帧率自适应采样，避免高帧率对算法耗时的大幅增加，同时也能满足医生手术操作的要求。S2：对视频进行帧率自适应采样，获得原含雾图像。本步骤对视频进行帧率自适应采样，具体是：判断帧率是否大于25FPS，若大于，对该帧率视频进行隔帧采样，否则，对该帧率视频进行逐帧采样，即对低帧率视频进行逐帧采样，对高帧率视频进行隔帧采样，高帧率视频中未采样的帧图像不进行S3中的计算，而是沿用上一帧图像的计算结果，可以使算法耗时减少50％，而实际上带来的去雾效果的损失可以忽略不计。S3：将原含雾图像通过暗通道先验去雾原理计算后获得暗通道图，并根据暗通道先验去雾原理估计暗通道图的大气光照系数和透射率图。在绝大多数非天空的局部区域里，某一些像素总会有至少一个颜色通道具有很低的值。换言之，该区域光强度的最小值是个很小的数。我们给暗通道一个数学定义，对于任意的输入图像J，其暗通道可以用公式(1)表达：式中Jc表示彩色图像的每个通道，Ω(x)表示以像素x为中心的一个窗口，c表示r、g、b三通道。暗通道先验的理论指出：Jdark→0(2)这个结论是基于大量自然图像暗通道图的统计而得出的先验结论。实际生活中造成三原色中低通道值主要有三个因素：a)汽车、建筑物和城市中玻璃窗户的阴影，或者是树叶、树与岩石等自然景观的投影；b)色彩鲜艳的物体或表面，在RGB的三个通道中有些通道的值很低(比如绿色的草地、树、植物，红色或黄色的花朵、叶子，或者蓝色的水面)；c)颜色较暗的物体或者表面，例如灰暗色的树干和石头。总之，自然景物中到处都是阴影或者彩色，这些景物的图像的三原色低通道值总是很低的。将暗通道理论应用于腹腔镜手术中一样本文档来自技高网...

【技术保护点】
一种腹腔镜手术视频帧率自适应的实时去烟雾方法，其特征在于，包括步骤：获取腹腔镜手术视频的帧率；对视频进行帧率自适应采样，获得原含雾图像；将所述原含雾图像通过暗通道先验去雾原理计算后获得暗通道图，并根据暗通道先验去雾原理估计所述暗通道图的大气光照系数和透射率图；利用所述原含雾图像、暗通道图、大气光照系数、透射率图，求解雾图成像方程，获得去雾图像；将所述去雾图像实时输出形成去雾视频。

【技术特征摘要】
1.一种腹腔镜手术视频帧率自适应的实时去烟雾方法，其特征在于，包括步骤：获取腹腔镜手术视频的帧率；对视频进行帧率自适应采样，获得原含雾图像；将所述原含雾图像通过暗通道先验去雾原理计算后获得暗通道图，并根据暗通道先验去雾原理估计所述暗通道图的大气光照系数和透射率图；利用所述原含雾图像、暗通道图、大气光照系数、透射率图，求解雾图成像方程，获得去雾图像；将所述去雾图像实时输出形成去雾视频。2.如权利要求1所述的实时去烟雾方法，其特征在于，对视频进行帧率自适应采样，具体是：判断帧率是否大于25FPS，若大于，对所述帧率视频进行隔帧采样，否则，对所述帧率视频进行逐帧采样。3.如权利要求2所述的实时去烟雾方法，其特征在于，通过指针操作符访问储存在内存空间中的原含雾图像、暗通道图像和透射率图。4.如权利要求3所述的实时去烟雾方法，其特征在于，所述将原含雾图像通过暗通道先验去雾原理计算之前还包括对采样帧的原含雾图像进行...

【专利技术属性】
技术研发人员：顾磊，徐庆，刘泽宇，柳彬，张增辉，郁文贤，刘佩林，
申请(专利权)人：上海交通大学，
类型：发明
国别省市：上海,31