基于点阵光投射的TOF深度相机制造技术

技术编号:35362404 阅读:19 留言:0更新日期:2022-10-29 18:00
本发明专利技术提供了一种基于点阵光投射的TOF深度相机,包括:结构光投射器,用于向目标投射结构光;红外相机,用于采集红外散斑图像和多张红外参考图像;处理器模块,用于根据多帧红外散斑图像相位差生成散斑深度图,散斑深度图包括红外散斑图像和深度数据,根据深度数据确定对应的红外参考图像,根据该散斑点的像素坐标确定红外参考图像中散斑点对应的参考区域,将参考区域中每一子区域与对应的散斑点区域进行匹配确定出相关度最高的目标子区域,确定目标子区域与参考区域的中心偏移量,当偏移量大于预设置的阈值时,确定该散斑点区域为多径干扰点。本发明专利技术能够检测出镜像多径,并去除多径干扰,实现基于散斑点阵投射的TOF深度相机在扫地机器人上的应用。扫地机器人上的应用。扫地机器人上的应用。

【技术实现步骤摘要】
基于点阵光投射的TOF深度相机


[0001]本专利技术涉及深度相机,具体地,涉及一种基于点阵光投射的TOF深度相机。

技术介绍

[0002]时间飞行(Time of flight,TOF)深度相机通过发射特定波段的泛光光束,再利用传感器接收被测空间中物体的反射光束并测量光束在空间中的飞行时间来计算距离,从而获取被测空间的深度图像。TOF深度相机可同时获得灰度图像和深度图像,广泛应用在3D深度视觉相关的手势识别、人脸识别、3D建模、体感游戏、机器视觉、辅助对焦、安防、自动驾驶等

[0003]传统TOF深度相机假设接收光束在目标场景中仅被反射一次,而实际场景中总会存在镜面反射或漫反射材料表面,它会把入射光反射到各个方向,这样一来,TOF传感器接收到的可能是一次反射光束和多次反射光束的叠加,从而干扰TOF深度相机测量距离的准确性,这一效应称为多径干扰。
[0004]传统的TOF深度相机通常包含一个光投射器和光接收传感器,光投射器向空间发射泛光光束以提供照明,光接收传感器接收反射回的泛光光束进行成像,深度计算装置通过发射光和接受光的相位延迟计算飞行时间,进而得到距离信息。采用这种方式测量深度有一些限制,比如环境光的干扰会影响测量的准确性,尤其是当环境光强度高于直接反射光的强度,导致光接收传感器接收到的信号主要是环境光,典型的场景是镜像多几个。
[0005]镜面多径是扫地机器人场景中经常遇到的问题,地面是高反射率瓷砖,地面上的点对应的像素接收到的信号是直接反射(主径)和经过物体多次反射(次级径)的光信号的叠加。对于高反射率物体,主径的强度远低于次级径的强度,导致测量的地面深度偏离实际深度。

技术实现思路

[0006]针对现有技术中的缺陷,本专利技术的目的是提供一种基于点阵光投射的TOF深度相机。
[0007]根据本专利技术提供的基于点阵光投射的TOF深度相机,1、一种基于点阵光投射的TOF深度相机,其特征在于,包括如下模块:
[0008]结构光投射器,用于向目标投射结构光;
[0009]红外相机,用于接收经所述目标反射后的结构光生成红外散斑图像和多张红外参考图像,所述红外参考图像为通过深度相机对一参考目标在多个不同的距离下采集生成;
[0010]处理器模块,用于根据多帧红外散斑图像相位差生成目标的散斑深度图,所述散斑深度图包括红外散斑图像以及红外散斑图像中每一散斑点的深度数据,以及根据每一散斑点的深度数据确定对应的红外参考图像,进而根据该散斑点的像素坐标确定所述红外参考图像中所述散斑点对应的参考区域,将所述参考区域中每一子区域与对应的所述散斑点区域进行匹配确定出相关度最高的目标子区域,确定所述目标子区域与所述参考区域的中
心偏移量,当所述偏移量大于预设置的阈值时,确定该散斑点区域为多径干扰点,进而去除所述红外散斑图像中的多径干扰点生成目标散斑图像。
[0011]优选地,在确定所述散斑点在所述红外参考图像中对应的参考区域时,包括如下步骤:
[0012]步骤M1:获取每一散斑点的深度数据,根据所述深度数据确定该散斑点对应的目标表面点距离深度相机的距离;
[0013]步骤M2:根据所述距离确定在相同距离下采集的红外参考图像;
[0014]步骤M3:根据该散斑点的像素坐标确定对应的所述红外参考图像中所述散斑点对应的参考区域。
[0015]优选地,在确定该散斑点为多径干扰点时,包括如下步骤:
[0016]步骤N1:计算所述散斑点区域与对应的所述参考区域左上角的一子区域相关度;
[0017]步骤N2:按照从左到右由上到下的顺序每次将所述子区域移动一个像素后计算该子区域与散斑点区域的相关度,直至确定出相关度最高的目标子区域;
[0018]步骤N3:确定所述目标子区域与所述散斑点区域的中心偏移量,且当所述偏移量大于预设置的阈值时,确定该散斑点为多径干扰点。
[0019]优选地,所述相关度r的计算方法如下:
[0020][0021]其中,A
mn
为参考区域的幅度,为参考区域的平均幅度;B
mn
为散斑点区域的幅度,为散斑点区域的平均幅度;m、n为像素坐标范围。
[0022]优选地,所述红外参考图像采集时包括如下步骤:
[0023]步骤S101:在一距离通过所述结构光投射器向所述参考目标投射点阵光;
[0024]步骤S102:通过所述红外相机的接收经所述参考目标反射后的所述点阵光生成一红外参考图像;
[0025]步骤S103:重复执行步骤S101至步骤S102获取多个不同的距离下的红外参考图像。
[0026]优选地,所述结构光投射器包括光源、光源驱动器以及光调制器;
[0027]所述光源驱动器与所述光源连接,用于驱动所述光源发光;
[0028]所述光调制器,用于将所述光源的投射的光调制呈结构光后向目标投射所述结构光。
[0029]优选地,所述红外相机包括沿光路设置的镜头、滤光片以及图像传感器,所述图像传感器设置有至少四个所述接收窗口;所述接收窗口的脉冲宽度大于或小于所述结构光的脉冲宽度;
[0030]所述图像传感器,用于通过至少四个接收窗口接收至少四个所述结构光的光信号;所述至少四个接收窗口在时序上顺次排列,进而根据每一所述接收窗口到的光信号生成每一所述散斑深度图。
[0031]优选地,所述结构光为点阵光;所述点阵光呈如下预设定的形状分布:直线形、三
角形、四边形、圆形、六边形、五边形、随机排布、空间编码排布以及准晶格排布。
[0032]优选地,所述散斑点区域的尺寸可以设置为5
×
5的像素区域,该散斑点区域包括一散斑点;
[0033]所述参考区域的尺寸可以设置为8
×
8的像素区域;所述阈值设置为两个像素。
[0034]根据本专利技术提供的基于点阵光投射的TOF深度相机,包括如下模块:
[0035]结构光投射器,用于向目标投射结构光;
[0036]红外相机,用于采集红外散斑图像;
[0037]存储器,用于存储多张红外参考图像,所述红外参考图像为通过所述深度相机对一参考目标在多个不同的距离下预先采集生成,
[0038]处理器模块,用于根据多帧红外散斑图像相位差生成目标的散斑深度图,所述散斑深度图包括红外散斑图像以及红外散斑图像中每一散斑点的深度数据,以及根据每一散斑点的深度数据确定对应的红外参考图像,进而根据该散斑点的像素坐标确定所述红外参考图像中所述散斑点对应的参考区域,将所述参考区域中每一子区域与对应的所述散斑点区域进行匹配确定出相关度最高的目标子区域,确定所述目标子区域与所述参考区域的中心偏移量,当所述偏移量大于预设置的阈值时,确定该散斑点区域为多径干扰点,进而去除所述红外散斑图像中的多径干扰点生成目标散斑图像。
[0039]与现有技术相比,本专利技术具有如下的有益效果:
[0040]本专利技术中通过红外参本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种基于点阵光投射的TOF深度相机,其特征在于,包括如下模块:结构光投射器,用于向目标投射结构光;红外相机,用于接收经所述目标反射后的结构光生成红外散斑图像和多张红外参考图像,所述红外参考图像为通过深度相机对一参考目标在多个不同的距离下采集生成;处理器模块,用于根据多帧红外散斑图像相位差生成目标的散斑深度图,所述散斑深度图包括红外散斑图像以及红外散斑图像中每一散斑点的深度数据,以及根据每一散斑点的深度数据确定对应的红外参考图像,进而根据该散斑点的像素坐标确定所述红外参考图像中所述散斑点对应的参考区域,将所述参考区域中每一子区域与对应的所述散斑点区域进行匹配确定出相关度最高的目标子区域,确定所述目标子区域与所述参考区域的中心偏移量,当所述偏移量大于预设置的阈值时,确定该散斑点区域为多径干扰点,进而去除所述红外散斑图像中的多径干扰点生成目标散斑图像。2.根据权利要求1所述的基于点阵光投射的TOF深度相机,其特征在于,在确定所述散斑点在所述红外参考图像中对应的参考区域时,包括如下步骤:步骤M1:获取每一散斑点的深度数据,根据所述深度数据确定该散斑点对应的目标表面点距离深度相机的距离;步骤M2:根据所述距离确定在相同距离下采集的红外参考图像;步骤M3:根据该散斑点的像素坐标确定对应的所述红外参考图像中所述散斑点对应的参考区域。3.根据权利要求1所述的基于点阵光投射的TOF深度相机,其特征在于,在确定该散斑点为多径干扰点时,包括如下步骤:步骤N1:计算所述散斑点区域与对应的所述参考区域左上角的一子区域相关度;步骤N2:按照从左到右由上到下的顺序每次将所述子区域移动一个像素后计算该子区域与散斑点区域的相关度,直至确定出相关度最高的目标子区域;步骤N3:确定所述目标子区域与所述散斑点区域的中心偏移量,且当所述偏移量大于预设置的阈值时,确定该散斑点为多径干扰点。4.根据权利要求3所述的基于点阵光投射的TOF深度相机,其特征在于,所述相关度r的计算方法如下:其中,A
mn
为参考区域的幅度,为参考区域的平均幅度;B
mn
为散斑点区域的幅度,为散斑点区域的平均幅度;m、n为像素坐标范围。5.根据权利要求1所述的基于点阵光投射的TOF深度相机,其特征在于,所述红外参考图像采集时包括如下步骤:步骤S101:在一距离通过所述结构光投射器向所述参考目标投射点阵光;步骤S102:通过所述红外相机的接...

【专利技术属性】
技术研发人员:刘东东邵小飞朱力吕方璐汪博
申请(专利权)人:深圳市光鉴科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1