立体视觉系统的场景深度恢复和三维重建方法技术方案

本发明专利技术涉及一种立体视觉系统的场景深度恢复和三维重建方法，通过标定求出左右摄像机的内参数和相对旋转矩阵与平移向量；对左右图像中的对应点进行匹配；对于一对匹配点，由它们的左右图像坐标和相应摄像机内参数求出它们的左右正规化向量；根据左右正规化向量的坐标，以场景点在左右摄像机坐标系中的深度值为参数，求出分别从左摄像机光心至左图像点和从右摄像机光心至右图像点的两条投影线方程；由左右正规化向量和摄像机的相对旋转矩阵与平移向量求出两条投影线的公垂线端点在左右摄像机坐标系中的深度值和三维坐标；从公垂线两个端点的坐标求出公垂线中点的坐标，以该中点坐标作为场景点的三维坐标，完成深度恢复和三维重建。

【技术实现步骤摘要】

【技术保护点】
一种立体视觉系统的场景深度恢复和三维重建方法，其特征在于包括如下具体步骤：１）通过摄像机标定和立体系统标定的方法，求出左右摄像机的内参数和相对旋转矩阵与平移向量；２）对于左右摄像机所摄同一场景的两幅图像，通过对应点匹配的方法 ，求出左右图像中的对应点；３）对于左右图像中的一对对应点，由它们的左右图像坐标和左右摄像机的内参数求出它们的正规化向量：＊＊＊其中，Ｎ↓［ｌ］和Ｎ↓［ｒ］分别是左右图像点的正规化向量，（Ｕ↓［ｌ］，Ｖ↓［ｌ］，１）和 （Ｕ↓［ｒ］，Ｖ↓［ｒ］，１）分别是正规化向量Ｎ↓［ｌ］和Ｎ↓［ｒ］的坐标，（ｕ↓［ｌ］，ｖ↓［ｌ］）和（ｕ↓［ｒ］，ｖ↓［ｒ］）分别是对应图像点的左右图像坐标，α↓［ｌ］、β↓［ｌ］和α↓［ｒ］、β↓［ｒ］分别是左右摄像机的主距，而（ｕ↓［ｌ０］，ｖ↓［ｌ０］）和（ｕ↓［ｒ０］，ｖ↓［ｒ０］）分别是左右摄像机主点的坐标；４）由对应点左右正规化向量的坐标，以场景点在左右摄像机坐标系中的深度值为参数，分别建立从左摄像机光心至左图像点和从右摄像机光心至右图像点的两条投影线 方程：＊＊＊其中，（Ｘ↓［ｌ］，Ｙ↓［ｌ］，Ｚ↓［ｌ］）是左投影线上公垂线端点Ｐ↓［ｌ］在左摄像机坐标系中的坐标，（Ｘ↓［ｒ］，Ｙ↓［ｒ］，Ｚ↓［ｒ］）是右投影线上公垂线端点Ｐ↓［ｒ］在右摄像机坐标系中的坐标；５）、 由左右正规化向量和摄像机的相对旋转矩阵与平移向量求出两条投影线的公垂线端点在左右摄像机坐标系中的深度值和三维坐标：＊＊＊Ｐ↓［ｌ］＝Ｚ↓［ｌ］Ｎ↓［ｌ］Ｐ↓［ｒ］＝Ｚ↓［ｒ］Ｎ↓［ｒ］其中，Ｚ↓［ｌ］是公垂线 与左投影线交点在左摄像机坐标系中的深度值，Ｚ↓［ｒ］是公垂线与右投影线交点在右摄像机坐标系中的深度值，Ｒ是右摄像机相对于左摄像机的旋转矩阵，Ｔ是右摄像机相对于左摄像机的平移向量；６）由公垂线两个端点的坐标求出公垂线中点的坐标：　 　＊＊＊其中，Ｐ↓［ｌｍｉｄ］为公垂线中点在左摄像机坐标系中的坐标，Ｐ↓［ｒｍｉｄ］为公垂线中点在右摄像机坐标系中的坐标，以Ｐ↓［ｌｍｉｄ］或Ｐ↓［ｒｍｉｄ］作为场景点的三维坐标，完成深度恢复和三维重建。...

【技术特征摘要】

【专利技术属性】
技术研发人员：王建华，刘允才，
申请(专利权)人：上海交通大学，
类型：发明
国别省市：31[中国|上海]