一种基于单目立体视觉相机的三维重建系统技术方案

本实用新型专利技术公开一种基于单目立体视觉相机的三维重建系统，该系统包括成像系统、机械臂、位姿反馈系统以及光源系统，其中，机械臂为三轴可旋转式机械臂，包括分别与成像系统连接的同心轴、与光源系统连接的第一转轴，以及用于自转的第二转轴，机械臂用于将光源系统移动到可移动范围内的任意点，所述位姿反馈系统与机械臂和光源系统连接，通过读取机械臂的三个轴的旋转信息，得到光源系统的光源和成像系统的相对位置关系，本实用新型专利技术能够用同一个光源模拟实现了多光源的效果，极大的提高光度三维重建的精度，另外，还具有极高的便携性，为光度立体视觉打下了工程基础。

A 3D reconstruction system based on Monocular Stereo Vision Camera

The utility model is a three-dimensional reconstruction system based on a monocular stereo vision camera. The system consists of an imaging system, a manipulator, a posture feedback system and a light source system, in which the manipulator is a three axis revolving manipulator, including a concentric axis connected to the imaging system and a first rotating shaft connected with the light source system. As well as the second rotating shaft for rotation, the manipulator is used to move the light source system to any point within the removable range. The pose feedback system is connected with the manipulator and the light source system. By reading the rotation information of the three axes of the manipulator, the relative position relationship between the light source of the light source system and the image system is obtained. The new method can simulate the effect of multi light source with the same light source, and greatly improve the precision of the three-dimensional reconstruction of the photometric. In addition, it has very high portability, which lays a foundation for the photometric stereo vision.

【技术实现步骤摘要】
一种基于单目立体视觉相机的三维重建系统
本技术涉及一种单目立体视觉中的光度三维重建领域，特别涉及一种基于单目立体视觉相机的三维重建系统。
技术介绍
二维图像是由三维场景投影得到的，其中包含着各种三维信息，如亮度、纹理、阴影、轮廓等。由图像的不同信息恢复物体三维形状的方法被统称为ShapeFromX问题。理论上，如果场景中物体与物体之间或物体各个部分之间的相互反射可以忽略的话，那么曲面上一个小曲面块所反射的光强就只与光照强度、相机拍摄角度、物体表面法向和物体表面反射率有关。如果把这些参数之间的关系用一个重构函数来表示，就可以从图像的像素亮度获得表面法向，通过表面法向就可以得到物体的三维数据。如果材料的物理参数已知(如：材料的反射率)，重构函数可以根据所对应的材料和光照条件假设一个合适的光照模型来获得，否则，也可以通过一个和被测物体材料相同且形状已知的标准参照物来获得。光度立体视觉技术(ThePhotometricStereo，简称PMS)最早是由R.J.Woodham提出的，其假设了一个已知的重构函数，即理想的朗伯体反射模型。采用一个相机和几个发光强度相同的光源，保持相机和所拍摄的物体不动，通过改变光源的方向，同时拍摄物体在不同光源照射条件下的一组图像，然后根据这些图像计算出物体的表面法向，由计算出的表面法向求解出物体表面的三维形状。实验表明，利用两幅具有不同光照几何特性的灰度图像来获得表面法向，利用三幅图像就可以获得一个漫反射表面的表面法向和反射率。经典的PMS技术是通过对目标物体加不同的光照变化，并记录光照参数来计算目标物体的表面高度。一般而言，相机拍摄到的样本的表面灰度值取决于样本表面的朝向，相机的视角方向和光源的照射方向。对于朗伯表面，样本的表面灰度值可描述为：i＝ρκcosθi(1)其中i为样本的灰度值；ρ代表从物体表面反射的光源的反照率；κ代表光源强度；θi为相对于物体表面的光源入射角的。公式(1)可进一步表达为：i＝ρκlTn＝(κl)T(ρn)＝sTb(2)其中i为样本的灰度值，n为样本表面单位法向量；b＝ρn是带乘数因子的表面法向量；s＝κl为带乘数因子的光照向量；l为光照向量；带乘数因子的表面法向量b和光照向量l是朗伯光度立体的基本实体。传统的光照立体技术是基于转换后的朗伯反射模型，如对于朗伯反射表面，变换光源位置，即可获得光照向量s1,s2,s3作用下拍摄到的物体表面不同方向光源的样本灰度值i1,i2,i3，进一步得到存储着灰度值向量的灰度值向量矩阵I：I＝[i1,i2,i3]T＝[s1,s2,s3]Tb＝STb(3)其中，矩阵S存储着带乘数因子的光照向量。如果光照矩阵S可逆，就可以计算出带乘数因子的表面法向量b：b＝S-TI(4)物体表面的反照率ρ可以通过求法向量b的模得到，同时物体表面的法向量可通过反照率ρ对b进行归一化得到。经过总结，经典光度立体视觉技术大致可以分为四个步骤：第一、根据物体的材料建立一个合适的光照模型。第二、计算光源方向，并在保持光源方向不变的条件下拍摄被测物体的图像。第三、根据图像中的亮度信息计算物体表面的法向场。第四、根据计算出来的表面法向求解物体三维数据。在近几年的光度立体视觉发展中，无论是弱约束的单目光度立体视觉，还是光度立体技术精细化的研究，都说明了在目前阶段：光源的数目和光源方位的精度一直是影响三维重建精度的重要因素。目前大部分的光度图像都采取有限的光源数目进行实验。对于朗伯体反射模型的目标物体，有良好的重建效果；而对于存在镜面反射区域的目标物体，三维重建效果则会产生畸变。目前解决镜面反射的方法效果比较好的是多光源的检测或者是基于建立特殊反射模型的非线性优化方法。较为传统的光源标定有漫反射球标定法、平面镜标定法、特征点检测法等方法，以及后来提出的以镜面为标定靶的基于镜面反射的光源标定法等改进方法。所有的方法中，都是未知光源位置，用不同方法来确定光源位置，会存在或多或少的误差。
技术实现思路
本技术提供了一种基于单目立体视觉相机的三维重建系统，采用一个光源即可实现三维重建。本技术采用以下技术方案：一种基于单目立体视觉相机的三维重建系统，包括成像系统、机械臂、位姿反馈系统以及光源系统，其中，机械臂为三轴可旋转式机械臂，包括分别与成像系统连接的同心轴、与光源系统连接的第一转轴，以及用于自转的第二转轴，机械臂用于将光源系统移动到可移动范围内的任意点，所述位姿反馈系统与机械臂和光源系统连接，通过读取机械臂的三个轴的旋转信息，得到光源系统的光源和成像系统的相对位置关系。所述机械臂的同心轴与成像系统的主轴同心连接，同心轴能够围绕成像系统的主轴进行360°旋转。所述机械臂上设置有锁紧按钮，当机械臂调整完姿态后，通过锁紧按钮能够锁定机械臂的位置。所述机械臂的各个轴均设置有电机，电机用于控制机械臂的旋转。所述成像系统为单目相机。所述光源系统的光源为LED点光源。与现有技术相比，本技术至少具有以下有益效果：本技术的基于单目立体视觉相机的三维重建系统通过机械臂将成像系统和光源系统连接，因此使得光源系统能够移动到可移动范围内的任意点，并满足成像系统的取光需求，本技术还通过设置位姿反馈系统来读取机械臂的三个轴的旋转信息，得到光源系统的光源和成像系统的相对位置关系，通过采集的相对位置关系信息用于三维重建，综上，本技术采用一个光源即可实现三维重建，光源的位置信息可直接准确测量，因此解决了现有技术中，由于采用未知光源位置，在确定光源位置时会存在或多或少的误差，导致三维重建结果不准确的问题。附图说明图1为光度立体视觉原理图。图2为本技术的基于单目立体视觉相机的三维重建系统的结构示意图。其中，1-机械臂，1-1-同心轴，1-2-第一转轴，1-3-第二转轴，2-光源系统，3-成像系统，4-目标物体。具体实施方式下面结合附图来对本技术作进一步的说明。如图2所示，本技术的基于单目立体视觉相机的三维重建系统采用光度立体技术进行图像采集和三维重建。主要包括以下几个系统：成像系统3、机械臂1、位姿反馈系统和光源系统2。其中，成像系统3为单目相机，用于采集不同光照下的图像；机械臂1同相机镜头主轴采用同心轴1-1相连，同心轴1-1能够围绕主轴进行360°旋转；光源系统2同机械臂1另一端相连，机械臂1使得光源系统2能够在单目相机周围自由移动。机械臂1将光源和单目相机连接起来，提高了视觉相机的便携性；利用机械臂1的姿态可调整特性，能够使光源系统2的位置自由调整。机械臂1为三轴可旋转式机械臂，能够在系统的指令下，不断调整姿态，将光源系统2移动到可移动范围内的任意点；位姿反馈系统能够读取机械臂1的三个转轴的旋转信息，得到光源系统2的光源和单目相机的相对位置关系，使得本技术的三维重建系统具有高精度，智能化的优点，配合光源系统，能够产生多光源光度立体重建的效果；本技术的光源系统2的光源为点光源，用于照射目标物体，以采集光度图像，能够在系统指令下，调节亮度。更具体地说，机械臂1包括与单目相机相连的同心轴1-1，中部的第二转轴1-3，同光源系统2相连的第一转轴1-2，同心轴1-1与第二转轴1-3固定连接，第二转轴1-3与第一转轴1-2铰接，第一转轴1-2与光源本文档来自技高网...

【技术保护点】
1.一种基于单目立体视觉相机的三维重建系统，其特征在于，包括成像系统(3)、机械臂(1)、位姿反馈系统以及光源系统(2)，其中，机械臂(1)为三轴可旋转式机械臂，包括分别与成像系统(3)连接的同心轴(1‑1)、与光源系统(2)连接的第一转轴(1‑2)，以及用于自转的第二转轴(1‑3)，机械臂(1)用于将光源系统(2)移动到可移动范围内的任意点，所述位姿反馈系统与机械臂(1)和光源系统(2)连接，通过读取机械臂(1)的三个轴的旋转信息，得到光源系统(2)的光源和成像系统(3)的相对位置关系。

【技术特征摘要】
1.一种基于单目立体视觉相机的三维重建系统，其特征在于，包括成像系统(3)、机械臂(1)、位姿反馈系统以及光源系统(2)，其中，机械臂(1)为三轴可旋转式机械臂，包括分别与成像系统(3)连接的同心轴(1-1)、与光源系统(2)连接的第一转轴(1-2)，以及用于自转的第二转轴(1-3)，机械臂(1)用于将光源系统(2)移动到可移动范围内的任意点，所述位姿反馈系统与机械臂(1)和光源系统(2)连接，通过读取机械臂(1)的三个轴的旋转信息，得到光源系统(2)的光源和成像系统(3)的相对位置关系。2.根据权利要求1所述的一种基于单目立体视觉相机的三维重建系统，其特征在于，所述机械臂(1)的同心轴(1-1)与成像系统(3...

【专利技术属性】
技术研发人员：王飞，张天昱，刘扬，崔珊珊，郭宇，王璇，
申请(专利权)人：西安交通大学，
类型：新型
国别省市：陕西,61