仅用两幅场景图像标定PTZ摄像机的方法技术

本发明专利技术公开了仅用两幅场景图像标定PTZ摄像机的方法，首先拍摄任意场景相对于PTZ摄像机在相同焦距，不同Pan‑Tilt角度下有重叠区域的两幅图像，对两幅图像进行特征点匹配，得到图像之间的匹配特征点对，考虑匹配特征点定位的不确定性和相机透镜畸变的影响，创建了结合特征点定位噪声以及透镜畸变的单应矩阵估计方法，求出两幅图像之间的单应性矩阵和PTZ摄像机在该焦距下的径向畸变系数，最后，通过构建Givens旋转矩阵对所求得的单应性矩阵进行分解，从而解算获得摄像机的四个内参(焦距，主点坐标，纵横比)，本发明专利技术可实现PTZ摄像机五个参数的在线标定。

【技术实现步骤摘要】

本专利技术涉及仅用两幅场景图像标定PTZ摄像机的方法，可应用于计算机视觉和视频监控领域中的PTZ摄像机标定。
技术介绍
PTZ相机(Pan、Tilt和Zoom的简写)，是集高分辨率摄像头、变速云台和光学变焦镜头等部件于一体的监控设备，因其高度的灵活性，广泛应用于现代工业的各个行业。随着视觉测量技术的发展，传统固定参数的静态摄像机已经不足以满足某些环境下的测量工作，例如大尺寸测量等。PTZ摄像机应用于视觉测量领域，解决了测量视角范围小、视角视向固定等问题，在增加视觉测量系统灵活性的同时，降低了对摄像机数目的要求。获取精确的PTZ相机标定结果，对于后续应用具有决定性的影响。一般来说，常用的PTZ相机标定技术可分为三类：传统标定方法，基于主动视觉的标定方法与自标定方法。传统标定方法需要借助一个标准的参照物或者是标定模板，利用参照物或标定模板上满足一定条件的点与其对应的图像点的一些约束条件来确定摄像机模型参数。文献“基于一维标定物的反射折射摄像机标定方法”(邓小明，吴福朝，段福庆等。计算机学报，2007，2010，Vol.30，No.5)：该方法首先使用一维标定物的图像和主点满足的不变量计算主点；然后通过一维标定物图像所隐含的正交消影点信息，线性地求解绝对二次曲线的像(IAC)，并对IAC矩阵进行Cholesky分解确定尺度因子和畸变因子；最后通过一维标定物的3次或3次以上的一般刚体运动，就能够标定反射折射摄像机的参数。可以看出传统方法的缺点是标定过程太复杂，需要高精度的标定块。其中基于主动视觉的标定方法是指，在已知摄像机的某些运动信息下标定摄像机的方法。文献“摄像机的一种主动视觉标定方法”(朱嘉，李醒飞等。光学学报，2010，Vol.30，No.5)：该方法控制摄像机作一组二维的平移运动，采集圆孔靶标件的图像并计算圆心的像点坐标，同时记录摄像机的移动距离，得到标定所需的特征点，利用这些特征点计算摄像机标定参数。这种方法的缺点是：需要高精度的摄影平台来实现，且要求获得摄像机的运动信息。自标定方法不需要标定物，是指仅依靠多幅图像对应点之间的关系直接进行标定的过程。目前常用的自标定方法，有的需要借助场景中的信息来完成标定，文献“单目主动视觉无人机导引中摄像机内参数标定的线性方法”(王睿，李欣，张广军。航空学报，2006，Vol.27，No.4)：该方法先在摄像机主点位置进行预标定，然后摄像机只需拍摄一幅着舰平面靶标上的一组正方形图像，无须知道该组正方形的任何几何信息，通过计算圆环点，建立绝对二次曲线对摄像机内参数的约束方程即可线性求解摄像机内参数。但是这种方法的缺点是：需要借助场景中特定图案包含的信息来完成标定。针对这种方法的不足，有文献如“基于同一场景3张影像的相机自标定算法”(李海滨，郝向阳，山海涛，陈杰。测绘科学技术学报，2008)：该方法控制相机获得同一场景的三幅未标定图像，依次进行角点提取，估计基本矩阵并得到同一参考系统下的三个投影矩阵，最后对相机进行自标定处理，获得相机的内部参数。这种方法虽然克服了上述方法依赖场景信息进行标定的缺点，但是它的不足在于：需要拍摄至少三幅图像来完成自标定。可以看出，目前通用的相机自标定方法，存在依赖场景信息和需要拍摄多幅图像这两种缺点，因此本领域需要一种能同时改善这两种缺点的自标定方法，并期望这种方法能有较高的精度和实用意义。
技术实现思路
针对现有技术的不足，本专利技术提供了仅用两幅场景图像标定PTZ摄像机的方法，只需拍摄有重叠区域的两幅图像并且不依赖于场景中的特定信息，即可完成标定，在简化PTZ摄像机的内参标定过程的同时提高标定的精度。本专利技术提出的仅用两幅场景图像标定PTZ摄像机的方法，包括以下步骤：步骤(1)控制待标定的PTZ(Pan-Tilt-Zoom)摄像机，保持Zoom参数不变，进行任意角度地Pan-Tilt旋转，在不同的姿态下拍摄任意场景有重叠区域的两幅图像。步骤(2)采用基于点特征的图像匹配方法，对所拍摄的两幅图像所含特征点进行匹配，得到两幅图像的匹配点对在图像坐标系下的坐标值。步骤(3)基于协方差矩阵求解步骤(2)中匹配特征点定位的不确定性，表示为各向异性非同分布的特征点定位噪声。综合考虑这种特征点定位噪声与相机透镜畸变，依据步骤(2)中两幅图像匹配点对之间满足的单应性约束关系，求解图像间的单应性矩阵H以及相机畸变系数η。步骤(4)基于步骤(1)中2次任意角度地Pan-Tilt旋转这一事实，构建Givens旋转矩阵对步骤(3)中求得的单应性矩阵H进行分解，得到PTZ摄像机内参的四个等式约束，求解出包括焦距和主点的四个内部参数：纵横比α，焦距f，主点坐标(u0，v0)，从而可实现PTZ相机五个参数(η，α，f，u0，v0)的标定。其中，考虑到相机所拍摄图像存在畸变以及匹配特征点定位的不确定性，提出了一种高精度含待估计透镜畸变系数η的单应性矩阵估计方法，并且在估计单应性矩阵H的同时估计出透镜畸变系数η。其中，仅需要摄像机在相同的焦距，不同的Pan-Tilt角度下拍摄到的任意场景有重叠区域的两幅图像，在得到两幅图像间精确的单应性矩阵后，根据2次任意角度地Pan-Tilt旋转这一事实，构建Givens旋转矩阵对单应性矩阵H进行分解，得到关于相机内参的四个等式约束并进行求解，从而完成相机(α，f，u0，v0)标定。本专利技术原理在于：控制PTZ摄像机在相同的焦距，不同Pan-Tilt角度下拍摄任意场景有重叠区域的两幅图像，采用一种基于尺度不变特性的图像特征点匹配方法，得到两幅图像之间的匹配点对，利用匹配点对，基于结合透镜畸变以及特征各向异性非同分布定位噪声的高精度单应矩阵估计方法完成图像间的单应性矩阵估计。最后引入Givens旋转矩阵，对单应性矩阵进行分解，得到PTZ相机的四个内部参数以及畸变系数，完成相机的标定。与现有技术相比，本专利技术的方法首先采用基于尺度不变特性的特征点匹配方法(如SIFT，SURF，SCARF等)，得到精确的匹配特征点。在进行单应性矩阵估计的时候，本专利技术综合考虑了摄像机镜头畸变和特征定位噪声，从而保证了较高的单应性矩阵估计精度。另外，本专利技术的方法只需要控制PTZ摄像机在相同焦距，不同位姿下拍摄任意场景有重叠区域的两幅图像，利用Givens旋转矩阵对两幅图像之间的单应性矩阵H进行分解，就可以得到精确的PTZ摄像机内参(α，f，u0，v0)。附图说明图1为本专利技术实施例提供的仅用两幅场景图像标定PTZ摄像机的方法的整体流程图；图2为本专利技术一个实例中所拍摄的两幅图像；图3为图2两幅图像的特征点匹配结果。具体实施方式：为了更好地理解被专利技术的技术方案，下面将结合附图对本专利技术实施方式作进一步地详细描述。本专利技术的PTZ摄像机标定方法包括以下步骤：1.拍摄标定所用图像：控制待标定的PTZ(Pan-Tilt-Zoom)摄像机，在相同的焦距，不同Pan-Tilt角度下拍摄任意场景有重叠的两幅图像。图2为一个实施例中所拍摄场景的两幅图像，其中I1为相机在初始位置拍摄到的图像，I2为对相机进行Pan-Tilt旋转后，拍摄到的图像。2.特征点匹配：可采用本领域所知的图像匹配算法对两幅图像I1和I2进行特征点匹配，如：SIFT，SURF，SCARF等特征点匹配算法。3.求本文档来自技高网...

【技术保护点】
仅用两幅场景图像标定PTZ摄像机的方法，其特征在于，该方法包括以下具体步骤：步骤(1)、控制待标定的PTZ(Pan‑Tilt‑Zoom)摄像机，保持Zoom参数不变，进行任意角度地Pan‑Tilt旋转，在不同的姿态下拍摄任意场景有重叠区域的两幅图像；步骤(2)、采用基于点特征的图像匹配方法，对所拍摄的两幅图像所含特征点进行匹配，得到两幅图像的匹配点对在图像坐标系下的坐标值；步骤(3)、基于协方差矩阵求解步骤(2)中匹配特征点定位的不确定性，表示为各向异性非同分布的特征点定位噪声，综合考虑这种特征点定位噪声与相机透镜畸变，依据步骤(2)中两幅图像匹配点对之间满足的单应性约束关系，求解图像间的单应性矩阵H以及相机畸变系数η；步骤(4)、基于步骤(1)中2次任意角度地Pan‑Tilt旋转这一事实，构建Givens旋转矩阵对步骤(3)中求得的单应性矩阵H进行分解，得到PTZ摄像机内参的四个等式约束，求解出包括焦距和主点的四个内部参数：纵横比α，焦距f，主点坐标(u0，v0)，从而可实现PTZ相机五个参数(η，α，f，u0，v0)的标定。

【技术特征摘要】
1.仅用两幅场景图像标定PTZ摄像机的方法，其特征在于，该方法包括以下具体步骤：步骤(1)、控制待标定的PTZ(Pan-Tilt-Zoom)摄像机，保持Zoom参数不变，进行任意角度地Pan-Tilt旋转，在不同的姿态下拍摄任意场景有重叠区域的两幅图像；步骤(2)、采用基于点特征的图像匹配方法，对所拍摄的两幅图像所含特征点进行匹配，得到两幅图像的匹配点对在图像坐标系下的坐标值；步骤(3)、基于协方差矩阵求解步骤(2)中匹配特征点定位的不确定性，表示为各向异性非同分布的特征点定位噪声，综合考虑这种特征点定位噪声与相机透镜畸变，依据步骤(2)中两幅图像匹配点对之间满足的单应性约束关系，求解图像间的单应性矩阵H以及相机畸变系数η；步骤(4)、基于步骤(1)中2次任意角度地Pan-Tilt旋转这一事实，构建Givens旋转矩阵对步骤(3)中求得的单应性矩阵H进行分解，得到PTZ摄像...

【专利技术属性】
技术研发人员：王睿，杨娇茹，冯遂舟，
申请(专利权)人：北京航空航天大学，
类型：发明
国别省市：北京;11