【技术实现步骤摘要】
本专利技术属于激光雷达深度估计技术，具体为一种联合红外图像的激光点云三维重建方法。
技术介绍
1、随着科技的发展，光子计数激光雷达由于其具有主动成像能力，作用距离远、成像精度高等特征，在军事领域和民用领域有着广泛的应用。光子计数激光雷达的核心技术是单光子探测器和时间相关单光子计数(time-correlated single-photon counting,tcspc)技术。单光子探测器是工作在盖革模式下的雪崩光电二极管(geiger-modeavalanche photo diode,gm-apd)。由tcspc技术得到每个扫描像素的光子计数直方图，其中包含了对应像素的深度信息，进而得到场景的三维信息。
2、光子计数激光雷达虽然经过了技术的不断进步，实现了更远距离的测距和成像，但是在更复杂的远距离场景下，信号光子淹没在大量的噪声信号中。在高背景噪声和微弱回波信号的情况下，目前的方法无法恢复高质量的三维深度图。
3、shin等人提供了一种从噪声光子探测数据中计算重建深度和反射率的方法，结合了单光子探测的单噪声模型和利用现实场景中存在的高度空间相关性，但是其方法在远距离重建时质量较差，无法恢复高精度的三维场景(1.shin d,xu f,wong f n,etal.computational multi-depth single-photon imaging[j].optics express,2016,24(3):253588)。kang y等人提出了了一种基于少量回波光子的快速远距离目标三维成像方法，实
技术实现思路
1、本专利技术的目的在于提出一种联合红外图像的激光雷达三维重建方法，以解决在远距离、高背景散射等问题导致的深度信息缺失和成像质量低的问题，从而更准确的估计场景的三维深度信息。
2、实现本专利技术目的的技术方案为：一种联合红外图像的激光点云三维重建方法，具体步骤为：
3、步骤1：采集目标的光子飞行时间数据和二维高分辨率红外图像；
4、步骤2：绘制目标的全部的光子飞行时间数据直方图，根据直方图得到潜在的目标深度聚类位置，并根据深度聚类位置进行全像素开窗，分离出噪声和信号光子，得到初始的光子信号集合和初始低分辨率激光雷达深度图像；
5、步骤3：手动配准步骤2得到的始低分辨率激光雷达深度图像与步骤1得到的二维高分辨率红外图像；
6、步骤4：寻找深度信息错误的像素点和信息缺失的空像素点；
7、步骤5：借助配准后的红外图像进行信息补全深度信息错误的像素点和信息缺失的空像素点，得到补全后的光子集合；
8、步骤6：构建深度图像重建的凸优化模型，使用全变分范数的正则化项，选择稀疏泊松重建算法的计算框架进行求解，得到高精度的激光雷达三维深度估计图像。
9、优选地，步骤1中利用激光雷达成像系统采集目标的光子飞行时间数据和二维高分辨率红外图像。
10、优选地，利用激光雷达成像系统采集目标的光子飞行时间数据和二维高分辨率红外图像的具体方法为：
11、激光雷达与红外相机同轴放置；
12、激光器发射的激光脉冲分成两束，一束通过发射扫描组件后到达探测目标，接收光学系统接收目标漫反射的光；
13、另一束由光电探测器接收，在时间相关光子计数系统形成起始信号，并触发计时电路开始计时，在回波经过接收系统到达探测器时形成一个停止信号，获得光子飞行时间，在使用激光雷达对目标进行探测时，使用红外相机采集得到目标的红外图像。
14、优选地，绘制目标的全部的光子飞行时间数据直方图，根据直方图得到潜在的目标深度聚类位置，并根据深度聚类位置进行全像素开窗，分离出噪声和信号光子，得到初始的光子信号集合和初始的低分辨率激光雷达深度图像，并且手动配准此深度图像与高分辨率红外图像的具体方法为：
15、步骤2.1：以时间为横坐标，光子个数为纵坐标，绘制目标所有像素的光子飞行时间直方图，由直方图得到局部峰值点集合{k1,k2,...,kn)}，其中kn表示第n个局部峰值对应的光子个数，假设kt为集合的最大值，将其对应的权重设置为1，其余局部峰值点的权重由此得到权重集合{w1,w2,...,wn}，并将权重集合进行下降排序并进行梯度操作，如果连续两次以上梯度值小于设置的阈值α，则认为处于稳定阶段，保留大于该梯度值对应的所有局部峰值点集合，作为可靠的深度聚类；
16、步骤2.2：保留可靠的深度聚类中峰值点前后tp/2的光子飞行时间作为信号光子的光子飞行时间，tp为发射激光的脉宽；
17、步骤2.3：根据像素内的回波光子数删除噪声，如果像素内的回波光子数m大于阈值m0，并且该像素内的光子飞行时间方差大于阈值k，则认为该像素内的光子信号是噪声，将其去除，反之则保留，其中ti是该像素内第i个信号的光子飞行时间，是该像素内所有光子飞行时间的平均值；
18、得到去除噪声的目标所有像素光子信号集合其中(xi,yi)表示第i个像素的坐标，ti＝{t1,t2,...,tn}是对应的光子飞行时间集合；
19、由每个像素的光子飞行时间的平均值乘上二分之一光速估算每个像素对应的距离，得到目标初始的深度图像。
20、优选地，手动配准始低分辨率激光雷达深度图像与二维高分辨率红外图像，具体方法为：
21、步骤3.1：从激光雷达深度图像中选择能够表示图像特征的两点(x1,y1),(x2,y2)，在红外图像中选择与之对应的两点(px1,py1),(px2,py2)；
22、步骤3.2：确定新的配准后的红外图像的中心点位置为：
23、
24、
25、步骤3.3：根据图像中心参考点确定切割范围，将原始高分辨率红外图像中与低分辨率深度图像对应的区域截取出来，得到配准后的本文档来自技高网...
【技术保护点】
1.一种联合红外图像的激光点云三维重建方法，其特征在于，具体步骤为：
2.根据权利要求1所述的联合红外图像的激光点云三维重建方法，其特征在于，步骤1中利用激光雷达成像系统采集目标的光子飞行时间数据和二维高分辨率红外图像。
3.根据权利要求2所述的联合红外图像的激光点云三维重建方法，其特征在于，利用激光雷达成像系统采集目标的光子飞行时间数据和二维高分辨率红外图像的具体方法为：
4.根据权利要求1所述的联合红外图像的激光点云三维重建方法，其特征在于，绘制目标的全部的光子飞行时间数据直方图，根据直方图得到潜在的目标深度聚类位置，并根据深度聚类位置进行全像素开窗，分离出噪声和信号光子，得到初始的光子信号集合和初始的低分辨率激光雷达深度图像，并且手动配准此深度图像与高分辨率红外图像的具体方法为：
5.根据权利要求1所述的联合红外图像的激光点云三维重建方法，其特征在于，手动配准始低分辨率激光雷达深度图像与二维高分辨率红外图像，具体方法为：
6.根据权利要求1所述的联合红外图像的激光点云三维重建方法，其特征在于，寻找信息缺失的空像素点
7.根据权利要求1所述的联合红外图像的激光点云三维重建方法，其特征在于，寻找深度信息错误的像素点的具体方法为：
8.根据权利要求1所述的联合红外图像的激光点云三维重建方法，其特征在于，对深度信息错误的像素点和信息缺失的空像素点借助配准后的红外图像进行信息补全的具体方法为：
9.根据权利要求1所述的联合红外图像的激光点云三维重建方法，其特征在于，构建深度图像重建的凸优化模型，并采用稀疏泊松重建框架重建高质量的三维场景信息的具体方法为：
...【技术特征摘要】
1.一种联合红外图像的激光点云三维重建方法，其特征在于，具体步骤为：
2.根据权利要求1所述的联合红外图像的激光点云三维重建方法，其特征在于，步骤1中利用激光雷达成像系统采集目标的光子飞行时间数据和二维高分辨率红外图像。
3.根据权利要求2所述的联合红外图像的激光点云三维重建方法，其特征在于，利用激光雷达成像系统采集目标的光子飞行时间数据和二维高分辨率红外图像的具体方法为：
4.根据权利要求1所述的联合红外图像的激光点云三维重建方法，其特征在于，绘制目标的全部的光子飞行时间数据直方图，根据直方图得到潜在的目标深度聚类位置，并根据深度聚类位置进行全像素开窗，分离出噪声和信号光子，得到初始的光子信号集合和初始的低分辨率激光雷达深度图像，并且手动配准此深度图像与高分辨率红外图像的具体方法为：
【专利技术属性】
技术研发人员：何伟基，解光耀，陈钱，张闻文，翟雨生，
申请(专利权)人：南京理工大学，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。