一种全景视觉成像系统的联合标定方法技术方案

本发明专利技术属于车载环境感知技术领域，具体涉及一种全景视觉成像系统的联合标定方法。该联合标定方法利用多光束激光雷达和视觉相机针对同一目标景物所采集图像的法向量在空间内平行的原理，建立两幅图像的之间的映射关系，从而实现多光束激光雷达点云图像和视觉相机图像间的联合标定。使用本发明专利技术的方法，能够快速、准确地计算出视觉相机图像与多光束激光雷达图像间的映射关系，实现此两者之间的联合标定，使得视觉相机和多光束激光雷达的图像融合成为可能，在无人车环境感知方面具备广阔的应用前景。

【技术实现步骤摘要】

本专利技术属于车载环境感知
，具体涉及一种全景视觉成像系统的联合标定方法。
技术介绍
车载环境感知系统是一个集成的多传感器系统，具备多环境参量的实时获取和数据融合与传输功能，是以无人车为代表的地面无人平台实现环境目标物特征提取和识别的核心系统。视觉相机和多光束激光雷达是车载环境感知系统中两个主要功能单元，前者具有实时成像能力，可快速、清晰地获取环境目标物的二维几何外形和颜色信息，是获取物体纹理信息的有效手段；后者具有精确的空间测距能力，可快速、准确地获取环境目标物的空间三维坐标，是获取空间数据的有效手段。结合视觉相机和激光雷达的优缺点，发挥各自优势，将视觉相机和激光雷达的数据相结合，建立激光雷达点云和视觉图像像素的映射关系，构建全景视觉成像系统，可解决车载环境感知系统三维环境快速建模的难题，是环境目标物特征提取和识别的基础。
技术实现思路
本专利技术需要解决的技术问题为：提供一种视觉相机图像和多光束激光雷达点云图像的联合标定方法。本专利技术的技术方案如下所述：一种全景视觉成像系统的联合标定方法，包括以下步骤：步骤一、将多光束激光雷达调整至任意一个视觉相机中的上方，使两者正对同一目标景物，且多光束激光雷达发射窗口的中心轴线与该视觉相机镜头的中心轴线同平面；步骤二、将标定靶面设置于所述多光束激光雷达和该视觉相机共同的正前方，并开始图像采集；步骤三、结合相机参数，分别计算所采集到多光束激光雷达点云图像和视觉相机图像的法向量，建立两幅图像的之间的映射关系；步骤四、依次将多光束激光雷达调整到其它视觉相机的上方，使多光束激光雷达与该视觉相机正对同一目标景物，且多光束激光雷达发射窗口的中心轴线与该视觉相机镜头的中心轴线同平面，每次调整完成后，均依次执行步骤二和步骤三；步骤五、在获得多光束激光雷达分别与所有视觉相机针对同一标定靶面所成图像间的映射关系后，完成联合标定。优选的，所述视觉相机有5个，在空间内均匀排布，它们镜头的中轴线共平面，且相邻的两视觉相机镜头的中轴线成角72°，所述视觉相机具有水平82°的视场角。优选的，步骤一中所述多光束激光雷达的调整通过旋转装置实现。优选的，步骤三中建立两幅图像的之间的映射关系的依据为：多光束激光雷达点云图像和视觉相机图像的法向量在空间内平行。一种全景视觉成像系统，包括：视觉相机、多光束激光雷达、旋转扫描机构、系统综合控制模块和系统结构工装，所述系统结构工装为正五棱柱形状，在五棱柱形状每个侧面的中心均安装有视觉相机，所有视觉相机镜头的中轴线共平面，相邻的两个视觉相机镜头的中轴线成角72°；在所述系统结构工装正五边形上底面的中心安装有旋转扫描机构，多光束激光雷达设置于旋转扫描机构之上，所述多光束激光雷达能够在旋转扫描机构的带动下平行于所述系统结构工装的正五边形上底面360°旋转；所述系统综合控制模块安装于系统结构工装下底面，用于实现视觉相机和多光束激光雷达的起停控制，调节旋转扫描机构的转速及工作模式，还进行数据的收集和处理。本专利技术的有益效果为：使用本专利技术的方法，能够快速、准确地计算出视觉相机图像与多光束激光雷达图像间的映射关系，实现此两者之间的联合标定，使得视觉相机和多光束激光雷达的图像融合成为可能，在无人车环境感知方面具备广阔的应用前景。附图说明图1为全景视觉成像系统的组成示意图；图2为图1的俯视图；图3为基于全景视觉成像系统的联合标定方法的流程图；图4为全景视觉成像系统的联合标定时的工作时序图；其中，1-视觉相机，2-多光束激光雷达，3-旋转扫描机构，4-系统综合控制模块，5-系统结构工装。具体实施方式本专利技术所述的全景视觉成像系统基于视觉相机和多光束激光雷达。在本专利技术的实施例中，共使用了5部视觉相机1，全部为单目视觉相机，其水平视场角为82°，垂直视场角为66°，利用面阵CCD芯片成像。5部视觉相机1的镜头中轴线共平面，且相邻的两部视觉相机1镜头的中轴线成角72°，因此通过这5部激光相机1可以获得水平360°视场范围、垂直-33°～+33°视场范围内的全景图像，相机单帧成像时间10ms。在本专利技术的实施例中使用的多光束激光雷达2具备32路激光发射通道，采用脉冲激光测距机制，利用飞行时间法测量目标物与多光束激光雷达2间的距离，垂直视场范围为-30°～+10°。在本实施例中将多光束激光雷达2设置于旋转扫描机构3之上，使得多光束激光雷达实现了水平360°视场范围内频率为20Hz的扫描探测。除了前述的视觉相机1和多光束激光雷达2之外，在实施例的全景视觉成像系统中还包含有系统综合控制模块4，用于实现视觉相机1和多光束激光雷达2的起停控制，调节旋转扫描机构3的转速及工作模式，还进行数据的收集和处理。视觉相机1通过CameraLink接口与系统综合控制模块4进行数据通讯，而多光束激光雷达2通过以太网口将其扫描得到的环境目标物点云数据通讯至系统综合控制模块4。所述的视觉相机1、多光束激光雷达2、旋转扫描机构3和系统综合控制模块4都被集成安装于一个系统结构工装之内5，如图1、2所示。本专利技术所述的全景视觉成像系统是将视觉相机1和多光束激光雷达2所获得的数据相融合，再生成三维的全景环境信息。所述融合需要建立多光束激光雷达2的点云像素和视觉相机1的图像像素之间的映射关系，即实现视觉相机1和多光束激光雷达2的全景联合标定。具体做法为：打开全景视觉成像系统，此时多光束激光雷达2的发射窗口应位于其中一个视觉相机1的上方，两者正对同一目标景物，多光束激光雷达2发射窗口的中心轴线与该视觉相机1镜头的中心轴线同平面。记此时多光束激光雷达2的位置为0°位置，将标定靶面放置于多光束激光雷达2的发射窗口前方，之后系统综合控制模块4开始读取该视觉相机1和所述多光束激光雷达2所拍摄的图像数据，并进行数据处理。由于该视觉相机1和多光束激光雷达2所拍摄的为同一标定靶面，故两者所生成的两幅图像的法向量应在空间内平行，根据这一关系，可以建立在0°位置处激光雷达坐标系和视觉相机坐标系的映射关系，即旋转矩阵和平移矩阵。之后旋转多光束激光雷达2至72°、144°、216°、288°位置处，重复前述操作，得到其他四个位置处视觉相机1和多光束激光雷达2成像坐标系之间映射关系，完成全景视觉成像系统的联合标定。联合标定方法的系统工作时序图和方法流程图分别如图3、图4所示。通过联合标定获得旋转矩阵和平移矩阵，可以将视觉相机1所产生的视觉图像像素点q(u，v)与激光雷达云点Q(X，Y，Z)相融合，即将q的RGB属性值赋给Q，从而把Q变为具有颜色属性的彩色点云数据。本文档来自技高网...

【技术保护点】
一种全景视觉成像系统的联合标定方法，其特征在于：包括以下步骤：步骤一、将多光束激光雷达调整至任意一个视觉相机中的上方，使两者正对同一目标景物，且多光束激光雷达发射窗口的中心轴线与该视觉相机镜头的中心轴线同平面；步骤二、将标定靶面设置于所述多光束激光雷达和该视觉相机共同的正前方，并开始图像采集；步骤三、结合相机参数，分别计算所采集到多光束激光雷达点云图像和视觉相机图像的法向量，建立两幅图像的之间的映射关系；步骤四、依次将多光束激光雷达调整到其它视觉相机的上方，使多光束激光雷达与该视觉相机正对同一目标景物，且多光束激光雷达发射窗口的中心轴线与该视觉相机镜头的中心轴线同平面，每次调整完成后，均依次执行步骤二和步骤三；步骤五、在获得多光束激光雷达分别与所有视觉相机针对同一标定靶面所成图像间的映射关系后，完成联合标定。

【技术特征摘要】
1.一种全景视觉成像系统的联合标定方法，其特征在于：包括以下步骤：步骤一、将多光束激光雷达调整至任意一个视觉相机中的上方，使两者正对同一目标景物，且多光束激光雷达发射窗口的中心轴线与该视觉相机镜头的中心轴线同平面；步骤二、将标定靶面设置于所述多光束激光雷达和该视觉相机共同的正前方，并开始图像采集；步骤三、结合相机参数，分别计算所采集到多光束激光雷达点云图像和视觉相机图像的法向量，建立两幅图像的之间的映射关系；步骤四、依次将多光束激光雷达调整到其它视觉相机的上方，使多光束激光雷达与该视觉相机正对同一目标景物，且多光束激光雷达发射窗口的中心轴线与该视觉相机镜头的中心轴线同平面，每次调整完成后，均依次执行步骤二和步骤三；步骤五、在获得多光束激光雷达分别与所有视觉相机针对同一标定靶面所成图像间的映射关系后，完成联合标定。2.如权利要求1所述的全景视觉成像系统的联合标定方法，其特征在于：所述视觉相机有5个，在空间内均匀排布，它们镜头的中轴线共平面，且相邻的两视觉相机镜头的中轴线成角72°，所述视觉相机具有水平82...

【专利技术属性】
技术研发人员：崇博，魏克全，刘栋苏，郝鹏，李晗，时兆峰，
申请(专利权)人：北京自动化控制设备研究所，
类型：发明
国别省市：北京;11