倒车影像的三维测量方法技术

本发明专利技术倒车影像的三维测量方法，涉及3D目标的图像数据处理，利用摄像机模型与射影几何的基本原理，推导出基于倒车影像的三维测量方法，步骤包括制作倒车影像摄像机测量装置、倒车影像系统的标定、摄像机位置的计算、目标高度计算、坐标系变换调整和倒车影像的三维标尺显示。该方法能有效测量路面上目标的高度及三维坐标，同时还能实现倒车影像的二维平面测量功能，克服了倒车影像的二维平面测量中不能测量目标高度的缺点，减少了交通事故的发生。

【技术实现步骤摘要】
【专利摘要】本专利技术，涉及3D目标的图像数据处理，利用摄像机模型与射影几何的基本原理，推导出基于，步骤包括制作倒车影像摄像机测量装置、倒车影像系统的标定、摄像机位置的计算、目标高度计算、坐标系变换调整和倒车影像的三维标尺显示。该方法能有效测量路面上目标的高度及三维坐标，同时还能实现倒车影像的二维平面测量功能，克服了倒车影像的二维平面测量中不能测量目标高度的缺点，减少了交通事故的发生。【专利说明】
本专利技术的技术方案涉及3D目标的图像数据处理，具体地说是倒车影像的三维测量方法。
技术介绍
随着成像技术与计算机视觉技术的快速发展，车载倒车影像系统被大量的装配在汽车上。与倒车雷达相比，倒车影像能提供更直观的视觉信息，并通过在画面上显示距离标尺来提醒驾驶员。这种技术的出现极大提高了驾驶安全程度。目前，一般的倒车影像系统仅能实现二维平面测量。倒车影像的二维平面测量存在不足，它只能实现路面目标距车尾距离的测量，给出用户警示，而不能测量目标的高度。由于不知道目标高度，用户可能对于能否通过目标做出错误估计，从而导致一些不必要的事故出现。虽然三维测量方法已经得到应用，CN103236083A公开了基于立体影像库的实时三维测量方法，CN102954770A披露了三维测量设备和三维测量方法，但这些三维测量方法均不能用于倒车影像的三维测量中。
技术实现思路
本专利技术所要解决的技术问题是:提供，利用摄像机模型与射影几何的基本原理，推导出基于，该方法能有效测量路面上目标的高度及三维坐标，同时还能实现倒车影像的二维平面测量功能，克服了倒车影像的二维平面测量中不能测量目标高度的缺点，减少了交通事故的发生。本专利技术解决该技术问题所采用的技术方案是:，利用摄像机模型与射影几何的基本原理，推导出基于，步骤是:第一步，制作倒车影像摄像机测量装置此装置包括:带有棋盘格的abed的面，abed所在的平面称为参考平面，将abed放到地面上，地面成为参考平面，参考平面abed中的棋盘格由48个黑白正方形组成，每个正方形的尺寸为50cmX 50cm,参考平面abed的边ad为测距线；一个垂直于参考平面abed的左侧平面cdef，平面cdef上设有九条平行的间隔均为50cm的垂直于参考平面的直线、高度测量线mn和高度测量线ef ;高度测量线mn和高度测量线ef均平行于参考平面abed的边Cd，高度测量线mn距离参考平面30cm，高度测量线ef距离参考平面20cm ;—个与左侧平面cdef平行的垂直于参考平面abed的右侧平面abgh，其构成和左侧平面cdef相同；左侧平面cdef能左右移动，根据汽车的宽度不同，通过左右移动左侧平面cdef，来调整参考平面abed的边ad的长度，即调整测距线的长度；第二步，倒车影像系统的标定采用Matlab相机标定工具箱来进行摄像机标定，具体步骤如下:(I)摄像机采用的是针孔摄像机，准备一张黑白棋盘格的图片，规格为包括13X10个黑白棋盘格方格，每个黑白棋盘格的大小为2cmX 2cm，用需要标定的摄像机从不同角度拍摄15张图片，进行角点检测，计算出需要标定的摄像机的内参数，内参数包括X轴和y轴的焦距fX、fy和成像原点(1?, V0),内参数矩阵K为【权利要求】1.，其特征在于:利用摄像机模型与射影几何的基本原理，推导出基于，步骤是: 第一步，制作倒车影像摄像机测量装置 此装置包括:带有棋盘格的abed的面，abed所在的平面称为参考平面，将abed放到地面上,地面成为参考平面,参考平面abed中的棋盘格由48个黑白正方形组成，每个正方形的尺寸为50cmX 50cm,参考平面abed的边ad为测距线；一个垂直于参考平面abed的左侧平面cdef，平面cdef上设有九条平行的间隔均为50cm的垂直于参考平面的直线、高度测量线mn和高度测量线ef ;高度测量线mn和高度测量线ef均平行于参考平面abed的边Cd，高度测量线mn距离参考平面30cm，高度测量线ef距离参考平面20cm ;—个与左侧平面cdef平行的垂直于参考平面abed的右侧平面abgh，其构成和左侧平面cdef相同；左侧平面cdef能左右移动，根据汽车的宽度不同，通过左右移动左侧平面cdef，来调整参考平面abed的边ad的长度，即调整测距线的长度； 第二步，倒车影像系统的标定 采用Matlab相机标定工具箱来进行摄像机标定,具体步骤如下: (1)摄像机采用的是针孔摄像机，准备一张黑白棋盘格的图片，规格为包括13X10个黑白棋盘格方格，每个黑白棋盘格的大小为2cmX2cm，用需要标定的摄像机从不同角度拍摄15张图片，进行角点检测，计算出需要标定的摄像机的内参数，内参数包括X轴和y轴的焦距fx、fy和成像原点(u。，v0),内参数矩阵K为 2.根据权利要求1所述，其特征在于:增加倒车影像的手动模式，用户根据需求，转换成手动模式，具体操作方法是:显示器屏幕是触控的，用户选择倒车影像显示器屏幕中，选取参考平面上的任何一点，用opencv软件过这一点做出垂直于参考平面的垂线，在垂直于参考平面的垂线上加上刻度，该刻度能进行疏密选择，做出高度标尺，用户通过高度标尺测量参考平面上的任何垂直于参考平面的目标的高度。3.根据权利要求1所述，其特征在于:增加倒车影像的测距线的疏密的选择功能，通过opencv软件，在倒车影像的显示器的视频中，加入不同数目的测距线，分为两种情况，一种情况是三条测距线，另一种情况是六条测距线，在opencv程序中加入控制选择，用户根据需求选择测距线的疏密。4.根据权利要求1所述，其特征在于:增加倒车影像的模式切换功能，二维模式是通过opencv软件在视频中只加入测距线和边缘线，三维模式是通过opencv软件在视频中加入测距线、边缘线和高度标尺,在opencv程序中加入控制选择,用户根据需求适时在二维模式和三维模式之间进行选择。【文档编号】G01C11/00GK103822614SQ201410092632【公开日】2014年5月28日 申请日期:2014年3月14日 优先权日:2014年3月14日 【专利技术者】胡钊政, 张兰, 李娜, 柏东芳, 赵斌, 夏克文 申请人:河北工业大学本文档来自技高网...

【技术保护点】
倒车影像的三维测量方法，其特征在于：利用摄像机模型与射影几何的基本原理，推导出基于倒车影像的三维测量方法，步骤是：第一步，制作倒车影像摄像机测量装置此装置包括：带有棋盘格的abcd的面，abcd所在的平面称为参考平面，将abcd放到地面上，地面成为参考平面，参考平面abcd中的棋盘格由48个黑白正方形组成，每个正方形的尺寸为50cm×50cm，参考平面abcd的边ad为测距线；一个垂直于参考平面abcd的左侧平面cdef，平面cdef上设有九条平行的间隔均为50cm的垂直于参考平面的直线、高度测量线mn和高度测量线ef；高度测量线mn和高度测量线ef均平行于参考平面abcd的边cd，高度测量线mn距离参考平面30cm,高度测量线ef距离参考平面20cm；一个与左侧平面cdef平行的垂直于参考平面abcd的右侧平面abgh，其构成和左侧平面cdef相同；左侧平面cdef能左右移动，根据汽车的宽度不同，通过左右移动左侧平面cdef，来调整参考平面abcd的边ad的长度，即调整测距线的长度；第二步，倒车影像系统的标定采用Matlab相机标定工具箱来进行摄像机标定，具体步骤如下：（1）摄像机采用的是针孔摄像机，准备一张黑白棋盘格的图片，规格为包括13×10个黑白棋盘格方格，每个黑白棋盘格的大小为2cm×2cm，用需要标定的摄像机从不同角度拍摄15张图片，进行角点检测，计算出需要标定的摄像机的内参数，内参数包括x轴和y轴的焦距fx、fy和成像原点(u0,v0)，内参数矩阵K为K=fx0u00fyv0001,]]>（2）进一步标定摄像机与路面之间的相对几何关系，利用（1）中计算出的内参数，用摄像机正对着第一步制作的倒车影像测量装置拍摄照片，进行角点检测，计算出摄像机的外参数矩阵，该外参数矩阵M由旋转矩阵（R）和平移向量(t)组成，摄像机标定采用的是平面标定法，外参数矩阵简化为M＝[r1?r2?t]，其中r1和r2为R的前两列，（3）计算出内、外参数，标定完成后，通过图像中参考平面上某点像素与真实场景中某点的对应关系：λ[u?v?1]T＝K[r1?r2?t][X?Y?1]T＝H[X?Y?1]T，将公式简化为其中λ为比例因子，H为单应性矩阵，A为参考平面上的点，为在世界坐标系下的坐标,为在摄像机图像上的对应点的坐标，利用单应性矩阵求解出在世界坐标系中的坐标，就可得到参考平面内任意两点间的距离，利用此方法进行参考平面的二维测量；第三步，摄像机位置的计算C点为摄像机的光心，O点为C点在参考平面上的垂点，摄像机在参考坐标系下的三维坐标由对应的旋转矩阵（R）与平移运动矢量（t）确定，及摄像机的光心C在参考平面上的正交投影点O，因为C＝?RTt，从而，摄像机的光心C在参考平面上的正交投影点O即沿平面法向量方向投影计算为其中r1、r2和r3为旋转矩阵的3列，摄像机距离参考平面的高度即为两点之间的距离计算出的距离为其中r3＝r1×r2，通过摄像机成像公式，计算出正交投影点O在摄像机图像上的成像点o，根据单应性矩阵因为正交投影点O点的坐标已经得出，所以：通过公式不难看出，该正交投影点O对应在摄像机图像上的点o刚好为参考平面法向量对应的消失点。根据单应性矩阵，通过摄像机图像上的点，两点确定一直线，求解参考平面上任意一条直线到摄像机正交投影点O的距离，进一步得到距离车尾的距离；第四步，目标高度计算根据高度计算方法，设目标点即需要测量其高度的点为P点，P点的背投影点为G点，P点在参考平面的垂点为M，这些点都是世界坐标系中的点，P、C和G三点共线，摄像机图像中的点p，p为P在摄像机图像上的成像点，根据单应性矩阵，总能找到P点的背投影点G，点P与点G在成像平面上图像点重合，根据点p，计算出G点在参考平面的物理坐标：其中根据单应性矩阵，确定G，M，O点在参考平面上的物理坐标，从而确定GM，OM的距离：||PM||||CO||=||GM||||GO||]]>通过上式，计算出目标点P点的高度：||PM||=||GM||||GO||||CO||]]>第五步，坐标系变换调整考虑到驾驶员观察影像的习惯问题，需要将坐标系进行变换调整，使得纵坐标轴为车子倒退的方向，而横坐标轴为垂直方向，这种坐标变换通过二维欧氏变换描述，即变换参数包含一个旋转角度与一平移矢量，变换方程为：X′Y′=cos(β)-sin(β)sin(β)cos(β)XY+txty]]>第六步，倒车影像的三维标尺显示利用上述的高度计算方法方法，在原有的二维倒车辅...

【技术特征摘要】

【专利技术属性】
技术研发人员：胡钊政，张兰，李娜，柏东芳，赵斌，夏克文，
申请(专利权)人：河北工业大学，
类型：发明
国别省市：