一种基于单目视觉的车辆重构算法制造技术

一种基于单目视觉的车辆重构算法，其步骤为：采用SIFT算子作为图像特征点的提取与匹配算法；采用基于标定物的摄像机标定方法，通过SIFT算子得到的特征匹配点计算摄像机的内参数和外参数；基于布尔图像的图像背景分割方法，将目标车辆从复杂的背景中提取出来；采用基于几何学的分层量化和表面分割方法得到车辆的3D模型。有益效果是：首次提出了一种新型的基于单目视觉的3D模型重建的整体算法框架，并首次将之应用到车辆的3D重建；通过空间点与投影点的关系建立摄像机内、外参数的超定方程，有效地提高了计算精度和计算速度；提出了AND-OR树车辆表面重组最优搜索算法，能够有效准确地搜索出最优的车辆表面形状，并且提高搜索速度和搜索的准确度。

【技术实现步骤摘要】

本专利技术涉及。
技术介绍
随着汽车产量的增长，汽车种类的增多，人们对汽车的需求越来越大。为了提高汽 车的产量就要同时缩短汽车的生产周期和设计周期。为了提高汽车的生产效率，缩短汽车 的设计周期。这就使得汽车的外形设计成为人们关注的焦点。现在的设计师在进行车辆外 形设计时多采用继承并发展以前的车辆设计方案的方法。这就使得高效准确地重建出车辆 的外形变得尤其重要。目前对于汽车外形的测量多采用三维坐标机或者激光扫描仪测出的 坐标点云，但实车往往不容易获得，即使较容易获得，所测点云的合理性也因操作人员的经 验而有所不同。另外这些方法有周期长，操作复杂、成本高、精度不高等缺点。
技术实现思路
本专利技术的目的是为了克服
技术介绍
中的不足之处，基于单目视觉采用几何学的分 层量化和图形分割重建车辆的3D模型。该方法通过处理不同角度拍摄的目标车辆的图像 序列可以准确地重建车辆外形，具有操作简单效果明显的特性。能够很好地得到车辆的外 形信息，重建车辆的3D模型。 为了解决上述存在的技术问题，本专利技术是通过以下技术方案实现的： -种基于单目视觉的车辆重构算法，其内容包括如下步骤： 步骤一、特征点的提取与匹配 所述的特征点的提取与匹配是指采用基于尺度空间不变性的SIFT算子的特征转 换算法；SIFT算子特征点提取是指将图像中感兴趣的可以更有效描述图像内容及结构的 特征找出来，如图像中的边缘、角点、兴趣点；SIFT算子特征点的匹配是指根据所选择特征 的值，建立特征点间的对应关系，将同一空间物理点在不同图像中的成像点对应起来，并由 此得到相应的视差图像； 所述的尺度空间不变性是指在不同的尺度空间下仍然能够匹配特征点。 所述的尺度空间是指在图像处理中引入一个被视为尺度的参数通过连续变换尺 度参数获得不同尺度下的图像处理信息。 所述的SIFT算子是在空间尺度中寻找极值点，并提取出其位置、尺度、旋转不变 量的算法。 步骤二、摄像机标定 所述的摄像机标定是指采用基于标定物的摄像机标定方法，通过摄像机拍摄到的 图片得到摄像机的内参数和外参数；所述的基于标定物的摄像机标定方法是指使用结构已 知的标定参照物，通过建立标定参照物上三维坐标已知的点与其图像点的对应约束关系， 利用空间点与图像点的共线性方程计算摄像机模型的内外参数，利用光束平差法实现相机 内外参数的校准；所述摄像机的内参数是指摄像机坐标系与世界坐标系之间进行变换时所 需要的一个3X3的旋转矩阵R和一个3X 1的平移矢量T ;所述摄像机的外参数是指有效 焦距f、像面中心坐标（叫，V(l)、径向畸变修正系数、切向畸变修正系数、仿射畸变和非正交 畸变修正系数； 步骤三、目标车辆与背景分割 所述的目标车辆与背景分割是指采用基于布尔图像的图像分割算法（BMS);所述 的目标车辆与背景分割是指进行车祸过程的三维重建时，首先要将目标车辆的轮廓从背景 中提取出来，这就需要对车祸过程中的图片进行图像分割；所述的布尔图像是指对图片的 每个颜色通道设置一个阀值来得到二值化的图像；通过这种方法能够有效的将目标车辆 与背景分割开来； 步骤四、车辆外形轮廓的模型重建 所述的车辆外轮廓的模型重建是指采用基于几何模型分层量化和表面空间分割 方法实现车辆的几何模型重建；所述的表面空间分割是指将车辆表面的不同几何形状从车 辆整体上提取出来，将车辆表面整体分割成多个不同几何形的小部分；所述的几何模型分 层量化是指将车辆表面分割出来的每一个小部分量化为不同的各种参数，例如：位置、位置 方向和几何图形的尺寸；最后将每个量化后的几何图形再重新映射到车辆的每一部分得到 几何图形描述的车辆的3D模型。 由于采用上述技术方案，本专利技术提供的与现有 技术相比，具有这样的有益效果： 1、本专利技术首次提出了一种新型的基于单目视觉的3D模型重建的整体算法框架， 并首次将之应用到车辆的3D重建。该技术的整体实现的组成为：特征点的提取与匹配、摄 像机标定、目标车辆与背景分割、车辆外形轮廓重建； 2、本专利技术通过空间点与投影点的关系建立摄像机内、外参数的超定方程，通过最 小二乘法求解摄像机内外参数，采用光束平差法对摄像机的内、外参数进行校准，有效地提 高了计算精度和计算速度； 3、本专利技术提出的一种基于布尔图像的图像背景分割算法能够有效地忽略图像中 的背景、凸显目标车辆，提高了目标车辆提取的效率； 4、本专利技术提出的基于几何学的分层量化和表面分割方法通过对SIFT提取的特征 点进行进一步的处理，采用线段和几何图形对车辆表面进行描述，有效地弥补了 SIFT特征 点提取算法不能提取边界的缺点； 5、本专利技术首次提出了 AND-0R树车辆表面重组最优搜索算法，能够有效准确地搜 索出最优的车辆表面形状，并且提高搜索速度和搜索的准确度。 【附图说明】： 附图1是本专利技术的整体实现结构图； 附图2是本专利技术的提取特征点的实现步骤结构图； 附图3是本专利技术的目标车辆与背景分割实现结构图； 附图4是本专利技术的车辆外轮廓模型重建实现结构图； 附图5是本专利技术的摄像机模型示意图； 附图6是本专利技术的目标车辆与背景分割的实验结果图； 附图7是本专利技术的几何学的3D模型重建的实验结果图。 【具体实施方式】： 以下结合附图与【具体实施方式】对本专利技术做更为详细的说明： ，如图1所示其实现步骤为：特征点的提取与 匹配、摄像机标定、目标车辆与背景分割、车辆外形轮廓重建。 图1所示是本专利技术的整体实现结构图。该图从整体上呈现了实现本专利技术的整体框 架结构。从提取图像的特征点到重建出车辆的3D模型，清晰地展示了实现流程以及每一步 的算法。这一整体框架是本专利技术首次提出并将之应用到车辆3D重建。这也是本专利技术的特 别之处。 此处所述的具体实施仅用以解释本专利技术，并不用于限定本专利技术。 所述特征点的提取与匹配是指基于尺度空间不变性的SIFT算子的特征转换算 法。SIFT算子特征点提取是指将图像中感兴趣的可以更有效描述图像内容及结构的特征找 出来，如图像中的边缘、角点、兴趣点； 所述的SIFT算子特征点提取步骤如下： 1)对图像建立尺度空间； 2)提取尺度空间的反应值的极值点； 3)优化计算，抛弃一些不稳定点； 4)对提取出的特征点分配主方向； 通过计算以特征点为中心的特定窗口内每个像素点的梯度幅值和方向来确定特 征点的分配主方向，建立特征描述子。计算公式如下：本文档来自技高网...

【技术保护点】
一种基于单目视觉的车辆重构算法，其主要特征在于：其内容包括如下步骤：步骤一、特征点的提取与匹配所述的特征点的提取与匹配是指采用基于尺度空间不变性的SIFT算子的特征转换算法；SIFT算子特征点提取是指将图像中感兴趣的可以更有效描述图像内容及结构的特征找出来，如图像中的边缘、角点、兴趣点；SIFT算子特征点的匹配是指根据所选择特征的值，建立特征点间的对应关系，将同一空间物理点在不同图像中的成像点对应起来，并由此得到相应的视差图像；步骤二、摄像机标定所述的摄像机标定是指采用基于标定物的摄像机标定方法，通过摄像机拍摄到的图片得到摄像机的内参数和外参数；所述的基于标定物的摄像机标定方法是指使用结构已知的标定参照物,通过建立标定参照物上三维坐标已知的点与其图像点的对应约束关系,利用空间点与图像点的共线性方程计算摄像机模型的内外参数，利用光束平差法实现相机内外参数的校准；所述摄像机的内参数是指摄像机坐标系与世界坐标系之间进行变换时所需要的一个3×3的旋转矩阵R和一个3×1的平移矢量T；所述摄像机的外参数是指有效焦距f、像面中心坐标(u0,v0)、径向畸变修正系数、切向畸变修正系数、仿射畸变和非正交畸变修正系数；步骤三、目标车辆与背景分割所述的目标车辆与背景分割是指采用基于布尔图像的图像分割算法(BMS)；所述的目标车辆与背景分割是指进行车祸过程的三维重建时，首先要将目标车辆的轮廓从背景中提取出来，这就需要对车祸过程中的图片进行图像分割；所述的布尔图像是指对图片的每个颜色通道设置一个阀值来得到二值化的图像；通过这种方法能够有效的将目标车辆与背景分割开来；步骤四、车辆外形轮廓的模型重建所述的车辆外轮廓的模型重建是指采用基于几何模型分层量化和表面空间分割方法实现车辆的几何模型重建；所述的表面空间分割是指将车辆表面的不同几何形状从车辆整体上提取出来，将车辆表面整体分割成多个不同几何形的小部分；所述的几何模型分层量化是指将车辆表面分割出来的每一个小部分量化为不同的各种参数，例如：位置、位置方向和几何图形的尺寸；最后将每个量化后的几何图形再重新映射到车辆的每一部分得到几何图形描述的车辆的3D模型。...

【技术特征摘要】
1. 一种基于单目视觉的车辆重构算法，其主要特征在于：其内容包括如下步骤： 步骤一、特征点的提取与匹配 所述的特征点的提取与匹配是指采用基于尺度空间不变性的SIFT算子的特征转换 算法；SIFT算子特征点提取是指将图像中感兴趣的可以更有效描述图像内容及结构的特 征找出来，如图像中的边缘、角点、兴趣点；SIFT算子特征点的匹配是指根据所选择特征的 值，建立特征点间的对应关系，将同一空间物理点在不同图像中的成像点对应起来，并由此 得到相应的视差图像； 步骤二、摄像机标定 所述的摄像机标定是指采用基于标定物的摄像机标定方法，通过摄像机拍摄到的图片 得到摄像机的内参数和外参数；所述的基于标定物的摄像机标定方法是指使用结构已知的 标定参照物，通过建立标定参照物上三维坐标已知的点与其图像点的对应约束关系，利用 空间点与图像点的共线性方程计算摄像机模型的内外参数，利用光束平差法实现相机内外 参数的校准；所述摄像机的内参数是指摄像机坐标系与世界坐标系之间进行变换时所需要 的一个3X3的旋转矩阵R和一个3X 1的平移矢量T ;所述摄像机的外参数是指有效焦距 f、像面中心坐标（叫，V(l)、径向畸变修正系数、切向畸变修正系数、仿射畸变和非正交畸变修 正系数； 步骤三、目标车辆与背景分割 所述的目标车辆与背景分割是指采用基于布尔图像的图像分割算法（BMS);所述的目 标车辆与背景分割是指进行车祸过程的三维重建时，首先要将目标车辆的轮廓从背景中提 取出来，这就需要对车祸过程中的图片进行图像分割；所述的布尔图像是指对图片的每个 颜色通道设置一个阀值来得到二值化的图像；通过这种方法能够有效的将目标车辆与背景 分割开来； 步骤四、车辆外形轮廓的模型重建 所述的车辆外轮廓的模型重建是指采用基于几何模型分层量化和表面空间分割方法 实现车辆的几何模型重建；所述的表面空间分割是指将车辆表面的不同几何形状从车辆整 体上提取出来，将车辆表面整体分割成多个不同几何形的小部分；所述的几何模型分层量 化是指将车辆表面分割出来的每一个小部分量化为不同的各种参数，例如：位置、位置方向 和几何图形的尺寸；最后将每个量化后的几何图形再重新映射到车辆的每一部分得到几何 图形描述的车辆的3D模型。2. 根据权利要求1所述的一种基于单目视觉的车辆重构算法，其主要特征在于：所述 的尺度空间不变性是指在不同的尺度空间下仍然能够匹配特征点。3. 根据权利要求1所述的一种基于单目视觉的车辆重构算法，其主要特征在于：所述 的尺度空间是指在图像处理中引入一个被视为尺度的参数通过连续变换尺度参数获得不 同尺度下的图像处理信息。4. 根据权利要求1所述的一种基于单目视觉的车辆重构算法，其主要特征在于：所述 的S...

【专利技术属性】
技术研发人员：张立国，崔利洋，杨芳梅，金梅，
申请(专利权)人：燕山大学，
类型：发明
国别省市：河北;13