使用结构光的增强对象检测制造技术

技术编号:16048137 阅读:30 留言:0更新日期:2017-08-20 07:37
提供了用于对感兴趣的区域成像的系统和方法。结构光源被配置成在摄像机的视场内提供由摄像机可检测的波长处的至少一个投射激光束形成的基本上二维的光幕。图像分析部件被配置成至少根据该至少一个投射激光束在图像内的位置来检测感兴趣的区域内的对象。

【技术实现步骤摘要】
【国外来华专利技术】使用结构光的增强对象检测相关申请本申请要求于2014年11月5日提交的美国临时专利申请序列号62/075,350的优先权,其通过引用并入本文。
本专利技术涉及车辆安全系统,并且更具体地涉及使用结构光来增强对象检测系统。
技术介绍
单目摄像机系统在摄像机的二维焦平面阵列中表现三维数据的能力有限。该摄像机对世界的图像呈现为平的而没有任何景深(depth-of-field)。用于恢复丢失的景深的算法技术依赖于应用,并且仅在极窄的范围内有效——它们不是全局鲁棒的。例如,从运动中恢复结构(structurefrommotion)以及时间立体匹配(temporalstereomatching)可以用于从具有差异化位置的单目摄像机重建深度图像。摄像机必须在具有帧间相关性的情况下移动,并且该移动必须在实物坐标中被跟踪,该跟踪通常使用惯性测量单元进行。诸如双色反射率、高洛德着色(Gouraudshading)以及平地模型(flatearthmodel)之类的其它示例需要受控的场景照明和静止的摄像机位置。
技术实现思路
根据本专利技术的一个方面,提供了用于检测感兴趣的区域内的对象的对象检测系统。摄像机被配置成对感兴趣的区域进行成像。结构光源被配置成在摄像机的视场内提供由摄像机可检测的波长处的至少一个投射激光束形成的基本上二维的光幕。图像分析部件被配置成至少根据该至少一个投射激光束在该图像内的位置来检测感兴趣的区域内的对象。根据本专利技术的另一方面,提供了用于检测感兴趣的区域内的对象的方法。将基本上二维的光幕投射到感兴趣的区域中。感兴趣的区域在摄像机处被成像以提供图像,使得基本上二维的光幕与地面的相交处可见。如果基本上二维的光幕与地面的相交处偏离预期基线,则确定存在对象。根据本专利技术的又一方面,提供了用于检测车辆的后方区域与盲点中的一个内的对象的对象检测系统。摄像机被配置成对车辆的后方区域与盲点中的这一个进行成像。结构光源包括激光二极管和光束整形光学部件,该结构光源被配置成在摄像机的视场内提供由摄像机可检测的波长处的至少一个投射激光束形成的基本上二维的光幕。图像分析部件被配置成至少根据该至少一个投射激光束在图像内的位置来检测车辆的后方区域与盲点中的这一个内的对象。附图说明图1示出了用于检测感兴趣的区域内的对象的对象检测系统的一个示例;图2示出了用于检测车辆的后方区域或盲点中的一个内的对象的系统的示例;图3示出了用于检测感兴趣的区域内的对象的方法;以及图4是示出了能够实现本文公开的系统和方法的示例的硬件部件的示例性系统的示意性框图。具体实施方式专利技术人已经确定可以用结构光来增强单目摄像机,以增强摄像机检测和定位视场内的对象的能力。具体地,可以将一个或多个光幕投射到摄像机的视场中,该一个或多个光幕即由一个或多个投射激光束形成的连续或间歇的二维形状。这些光幕的偏转或变形可以被检测和量化以确定对象在视场内的存在以及位置。在一个实现中,可以使用多个形状来限定对象可以通过其延伸的不同范围。在另一实现中,使用两个或更多个非平行光束来在视场内提供三维形状以允许更准确地确定对象的位置。图1示出了用于检测感兴趣的区域内的对象的对象检测系统10的一个示例。系统10包括摄像机12和结构光源14,该摄像机12被配置成对感兴趣的区域成像,并且该结构光源14被配置成在摄像机的视场18内提供由摄像机可检测的波长处的至少一个投射激光束形成的二维形状16。在一个实现中,摄像机被选择为在可见光带内成像,并且激光器在532nm左右运行。图像分析部件20被配置成至少根据该至少一个投射激光束在图像内的位置(或者更具体地,光束和地面的相交处的位置)来检测感兴趣的区域内的对象。在一个实现中,该检测可以通过将摄像机图像转换成世界坐标域并且检查激光与反射对象的相交线以确定是否存在任何对象来实现。在一个实现中,两个非平行线的相交点可以被用作变换中的已知参考点。替代地,可以使用表示距离车辆的不同距离的多个平行光束,其中特定光束显示出指示对象距离车辆的距离的偏转。图2示出了用于检测车辆的后方区域或盲点中的一个(这里被称为感兴趣的区域)内的对象的系统50的示例。系统50包括被配置成对感兴趣的区域成像的摄像机52。在所示的实现中,摄像机52被配置成检测可见域和近红外域中的入射光。摄像机52被定位在车辆上有效地对感兴趣的区域进行成像的位置。应当认识到,摄像机52可以经由车辆总线53连接到系统的其它部件54和60。结构光源54被配置成提供进入到感兴趣的区域中的基本上二维的光幕。在所示的实现中,结构光源54包括激光二极管56以及光束整形光学部件58,激光二极管56被配置成提供摄像机52可检测的波长处的至少一个激光束,光束整形光学部件58被配置成从该至少一个激光束产生基本上二维的光幕。应当认识到,激光二极管56可以提供在可见范围、红外范围和紫外范围的任何一个范围中的光。光束整形器光学部件58可以包括衍射扩散器、衍射光束整形器或其它合适的光学部件中的任何一个。在所示的实现中,光束整形光学部件58可以包括可靠的(solid)衍射光束成形光学器件,其产生跨四十六度的角度的光幕。因此,应当认识到,所示出的实现在光学器件中没有移动部件的情况下起作用。结构光源54可以被安装在车辆上的适当位置以将光幕投射到感兴趣的区域中。专利技术人已经发现并置(collocating)结构光源54和摄像机52可能导致次优结果,而结构光源54和摄像机52的位置可以以其它方式被选择为在给定车辆的几何形状的情况下使得成像的感兴趣的区域的效用最大化。在一个实现中,结构光源54和摄像机52中的每一个可以被安装到车辆的顶部并且被水平基线分开。在另一实现中,结构光源54和摄像机52可以被小的垂直基线分开。将进一步认识到,结构光源54可以被配置成提供到感兴趣的区域中的附加光幕。为此,光束整形光学部件58可以被配置成提供多个平行光幕。例如,合理地假定在相交点处为水平地面,每个光幕可以被投射成在与车辆的在其上安装了结构光源的一侧基本上平行的线处与地面相交,其中每个光幕在离车辆的指定距离处与地面相交。替代地或附加地,结构光源54可以被配置成提供与一个或多个其它光幕基本上垂直的光幕,使得该光幕在与其它光幕的一条或多条线基本上垂直的线中与地面相交。应当认识到,附加光幕可以由附加结构光源(未示出)提供,而不是如图2中所示的那样从单个部件提供多个光幕。在摄像机52处拍摄的图像被提供给图像分析部件60,图像分析部件60被配置成确定在感兴趣的区域中是否存在对象。应当认识到,图像分析部件60可以被实现为在车辆内的微处理器上操作的软件、被实现为专用硬件、或者被实现为软件和专用硬件的组合。具体地,图像分析部件60根据捕获的图像来确定在光幕的路径中是否存在一个或多个对象。如果在摄像机52或相关部件(未示出)处未对图像执行校正,则图像分析部件60可以被配置成在分析之前校正图像,并且可以在分析之前执行其它图像调节。应当认识到,在没有对象的情况下,在光幕与地面相交时光幕将形成相对直的线。然而,在光幕的范围内存在对象的情况下,光幕与对象的相交处将相对于原始基线具有高程(elevation)。在一个实现中,可以使用多个平行光幕来限定车辆附近的各个区域。在该实现中,可以根据哪个或者哪本文档来自技高网...
使用结构光的增强对象检测

【技术保护点】
一种用于检测感兴趣的区域内的对象的对象检测系统,包括:摄像机,所述摄像机被配置成对感兴趣的区域进行成像;结构光源,所述结构光源被配置成在摄像机的视场内提供由所述摄像机能够检测的波长处的至少一个投射激光束形成的基本上二维的光幕;以及图像分析部件,所述图像分析部件被配置成至少根据所述至少一个投射激光束在所述图像内的位置来检测感兴趣的区域内的对象。

【技术特征摘要】
【国外来华专利技术】2014.11.05 US 62/075,3501.一种用于检测感兴趣的区域内的对象的对象检测系统,包括:摄像机,所述摄像机被配置成对感兴趣的区域进行成像;结构光源,所述结构光源被配置成在摄像机的视场内提供由所述摄像机能够检测的波长处的至少一个投射激光束形成的基本上二维的光幕;以及图像分析部件,所述图像分析部件被配置成至少根据所述至少一个投射激光束在所述图像内的位置来检测感兴趣的区域内的对象。2.根据权利要求1所述的对象检测系统,其中所述结构光源包括被配置成产生所述基本上二维的光幕的光束整形光学部件和激光二极管。3.根据权利要求2所述的对象检测系统,所述激光二极管被配置为产生红外光带内的光。4.根据权利要求1所述的对象检测系统,其中所述摄像机在第一位置处被安装到车辆,并且所述结构光源在空间上远离所述第一位置的第二位置处被安装到所述车辆。5.根据权利要求1所述的对象检测系统,其中图像分析系统被配置成评估所述图像内的所述基本上二维的光幕与地面的相交处,其中对象的存在通过由所述相交处形成的线与预期基线的偏离来指示。6.根据权利要求1所述的对象检测系统,其中所述基本上二维的光幕是第一基本上二维的光幕,所述结构光源还被配置成在所述摄像机的视场内提供第二基本上二维的光幕,所述第二基本上二维的光幕基本上平行于所述第一基本上二维的光幕。7.根据权利要求5所述的对象检测系统,其中,所述图像分析部件被配置成评估所述图像内所述第一基本上二维的光幕和所述第二基本上二维的光幕中的每一个与地面的相应相交处,其中在第一距离处对象的存在通过由第一基本上二维的光幕与地面的相交处形成的线与第一预期基线的偏离来指示,并且在第二距离处对象的存在通过由第二基本上二维的光幕与地面的相交处形成的线与第二预期基线的偏离来指示。8.根据权利要求1所述的对象检测系统,其中所述基本上二维的光幕是第一基本上二维的光幕,所述结构光源还被配置成在所述摄像机的视场内提供第二基本上二维的光幕,所述第二基本上二维的光幕基本上垂直于所述第一基本上二维的光幕。9.根据权利要求1所述的对象检测系统,其中,所述结构光源被配置成具有在40度和50度之间的分散角。10.根据权利要求1所述的对象检测系统,所述图像分析部件包括坐标变换部件,所述坐标变换部件被配置成向所述图像应用坐标变换,使得对于所述图像内的每个像素(x,y),其中x表示像素所处于的列并且y是像素所处于的行,位置(X,Z)被确定为其中X表示离摄像机的横向距离并且Z表示离摄像机的顺向距离,其中fx是摄像机的水平焦距,fy是摄像机的垂直焦距,φ是摄像机俯仰角,并且H是摄像机高度。11.根据权利要求1所述的对象检测系统,所述对象检测系统包括高程计算部件,所述高程计算部件被配置成根据离...

【专利技术属性】
技术研发人员:G·G·尚普
申请(专利权)人:TRW汽车美国有限责任公司
类型:发明
国别省市:美国,US

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1