结合拓扑关系和极线约束的管路三维重建方法技术

本发明专利技术涉及结合拓扑关系和极线约束的管路三维重建方法。其步骤为:首先利用已全局标定的工业相机对导管图像进行同步采集,进行图像增强,使图像边缘锐化,进而利用边缘检测算法检测图像边缘,滤除错误的边缘区域,得到弯管图像边缘区域,然后对边缘图像进行骨架提取得到弯管图像的中轴线,借助于图像分割将中轴线分割成直线段和椭圆段区域,最后借助于透射变化中的拓扑关系和极线约束对控制点进行三维重建,结合弯管的管径和弧径重建出弯管的三维模型。本发明专利技术方法能有效的重建管路的三维模型；能有效剔除极线约束过程中造成的多义性，得到的控制点鲁棒性强；精度高，效率高。

【技术实现步骤摘要】
结合拓扑关系和极线约束的管路三维重建方法
本专利技术涉及计算机视觉
,具体的说是结合拓扑关系和极线约束的管路三维重建方法。
技术介绍
在管路装配之前，需要对管件弯曲成形后的空间几何形态进行精确测量，从而对具有不同弯曲角度、曲线以及直线部分的管件加工后数据和设计模型数据进行对比，以实现管件加工过程中的回弹补偿和加工后的质量校验。只有测量合格的关键才能实施装配，并以此装配成功，对于不合格的管路，可根据测量结果修正加工参数。目前对成型的弯管测量方式主要是接触式的，例如靠模法、三坐标测量机、关节式坐标测量机等，这些方法存在对比装置制造困难，容易造成损伤或变形，效率低，过分依赖操作者主观判断，无法重建三维模型以及无定位基准等缺陷。因此如何有效地缩短研制时间、降低研制成本、提高产品质量是弯管快速加工制造的主要目的。张天等人在“基于多目视觉的弯管空间参数测量方法”中，提取中心轴线上的离散特征点列，利用极线约束进行中心线三维重建，然而该方法具有多义性，造成大量的误匹配点，不能适应于大量的弯管类型。
技术实现思路
针对现有技术中存在的上述不足之处，本专利技术要解决的技术问题是提供一种结合拓扑关系和极线约束的管路三维重建方法，该方法有效的结合投射投影过程中直线段交比不变性和叉积符号量不变性等拓扑关系，剔除了多义性的控制点，鲁棒性强，效率高，精度高。本专利技术为实现上述目的所采用的技术方案是：结合拓扑关系和极线约束的管路三维重建方法，包括以下步骤：步骤1：对多个工业相机进行全局标定，同步触发多个工业相机采集不同视角下放置在背光板上的原始弯管图像；步骤2：对每一幅原始弯管图像进行如下步骤2.1至步骤2.4的处理；步骤2.1：增强原始弯管图像的高频分量获取边缘尖锐的图像：res＝round((orig-mean)*Factor)+orig其中，res表示增强后的图像，orig表示原图像，mean表示由图像线性平滑得到的图像，Factor表示对比度增强系数，round表示四舍五入取整；步骤2.2：对增强后的图像进行亚像素精度边缘提取，滤除干扰边缘得到弯管的边缘区域；步骤2.3：对弯管的边缘区域进行骨架提取，得到弯管区域的中心轴线；步骤2.4：将弯管中心轴线分割成直线段和椭圆段；步骤3：若在第i个工业相机拍摄的图像中弯管中心轴线被分割成n条直线段，计算任意相邻两个直线段的交点作为该幅图像的待匹配点Pin-1，结合直线段和待匹配点记为步骤4：由全局标定得到工业相机的内外参数，并借助极线约束对任意两个工业相机a、b拍摄的两幅图像的待匹配点和进行特征点匹配，得到特征匹配点对，其中m表示工业相机a拍摄图像中弯管中轴线分割的直线段数，s表示工业相机b拍摄图像中弯管中轴线分割的直线段数；步骤5：利用拓扑关系中叉积符号量和直线交比透视投影不变性去除步骤4中特征匹配点对的误匹配点，得到最终的特征匹配点对作为弯管的控制点。所述对多个工业相机进行全局标定是利用单个激光跟踪仪和一个平面靶标。所述原始弯管图像是由若干直线段区域和圆弧段区域组成的。所述步骤2.2中是利用Canny检测算子对增强后的图像进行亚像素精度边缘提取。所述骨架提取包括：以距离两侧边界上两点等距的像素点作为中轴线的像素点，用于图像细化。所述将弯管中心轴线分割成直线段和椭圆段，包括：将弯管中心轴线近似的通过一个过度分割的多边形曲线来表示，遍历多边形曲线的每条边；如果拟合直线段的误差小于拟合椭圆段的误差，则彼此相邻的线段就被合并为直线段；如果拟合椭圆的误差小于拟合直线的误差，则彼此相邻的线段就被合并为椭圆弧；迭代处理多边形曲线的所有边，直到没有可以合并的直线段为止。所述内外参数，包括：内参数表示从工业相机坐标系到像平面坐标系的变换，像平面坐标系用像素单位表示；每个镜头的畸变程度各不相同，包括径向畸变、偏心畸变；利用二维柔性靶标对每个工业相机的内参数进行标定；外参数表示从工业相机坐标系到世界坐标系的变换矩阵，通过旋转矩阵R和平移矩阵T实现。本专利技术具有以下有益效果及优点：1.本专利技术所述的结合拓扑关系和极线约束的管路三维重建方法能有效的重建管路的三维模型。2.本专利技术所述的结合拓扑关系和极线约束的管路三维重建方法能有效剔除极线约束过程中造成的多义性，得到的控制点鲁棒性强。3.本专利技术所述的结合拓扑关系和极线约束的管路三维重建方法利用控制点和外径重建管路的三维模型，精度高，效率高。附图说明图1为本专利技术方法流程图；图2(a)为本专利技术方法中采用的叉积符号量不变性图之前的原图；图2(b)为本专利技术方法中采用的叉积符号量不变性图透视投影后的图；图3为本专利技术方法中采用的透视投影直线交比不变性图。具体实施方式下面结合附图及实施例对本专利技术做进一步的详细说明。参照附图1、附图2(a)、附图2(b)和附图3，本专利技术所述结合拓扑关系和极线约束的管路三维重建方法的具体步骤如下：步骤1：严格触发多个工业相机对放置在背光板上的复杂弯管进行同步采集；步骤2：对每一幅原始弯管图像进行如下步骤2.1至步骤2.4的处理：步骤2.1：增强图像的高频分量(边缘和角点)，使得边缘更尖锐，图像更清晰。res＝round((orig-mean)*Factor)+origres表示增强后的图像，orig表示原图像，mean表示由图像线性平滑得到的图像，相当于对图像进行低通滤波，Factor表示对比度增强系数。步骤2.2：利用Canny检测算子对图像进行亚像素精度边缘提取，滤除干扰边缘，得到弯管的边缘区域。步骤2.3：对弯管的边缘区域进行骨架提取，得到弯管区域的中心轴线区域。步骤2.4：对中心轴线区域进行中心线分割，将弯管中心线分割成直线段区域和椭圆段区域。将弯管中心轴线近似的通过一个过度分割的多边形曲线来表示，遍历多边形曲线的每条边；如果拟合直线段的误差小于拟合椭圆段的误差，则彼此相邻的线段就被合并为直线段；如果拟合椭圆的误差小于拟合直线的误差，则彼此相邻的线段就被合并为椭圆弧；迭代处理多边形曲线的所有边，直到没有可以合并的直线段为止。步骤3：对每一幅图像计算步骤2.4中相邻两个直线段的交点，作为图像待匹配点Pi1，结合直线段和待匹配点，记为计算相邻两个直线段的交点，作为图像待匹配点，结合直线段记为其中，和表示形成Pin-1待匹配点的两条相邻直线段，Pin-1表示第i个工业相机采集图像获得的图像的第n-1个待匹配点。步骤4：由全局标定得到工业相机的内外参数，并借助极线约束对任意两个工业相机a、b拍摄的两幅图像的待匹配点和进行特征点匹配，得到特征匹配点对，其中m表示工业相机a拍摄图像中弯管中轴线分割的直线段数，s表示工业相机b拍摄图像中弯管中轴线分割的直线段数；步骤5：由于特征点匹配容易造成多义性，利用拓扑关系中叉积符号量和直线交比透视投影不变性去除多义性，得到精确的特征匹配点对。附图2(a)、附图2(b)可知，空间中的公共端点P0，有向线段和有向线段的叉积符号量在透视投影前后保持不变。根据右手准则，相对于P0，叉积P1×P2即(P1-P0)×(P2-P0)＝(x1-x0)(y2-y0)-(x2-x0)(y1-y0)的符号大于0，在P0,P1,P2经过透视投影后，叉积P1×P2即(P1-P0)×(P2-P0)＝(x1-x0)(y2-y0)-(x2本文档来自技高网...

【技术保护点】
1.结合拓扑关系和极线约束的管路三维重建方法，其特征在于，包括以下步骤：步骤1：对多个工业相机进行全局标定，同步触发多个工业相机采集不同视角下放置在背光板上的原始弯管图像；步骤2：对每一幅原始弯管图像进行如下步骤2.1至步骤2.4的处理；步骤2.1：增强原始弯管图像的高频分量获取边缘尖锐的图像：res＝round((orig‑mean)*Factor)+orig其中，res表示增强后的图像，orig表示原图像，mean表示由图像线性平滑得到的图像，Factor表示对比度增强系数，round表示四舍五入取整；步骤2.2：对增强后的图像进行亚像素精度边缘提取，滤除干扰边缘得到弯管的边缘区域；步骤2.3：对弯管的边缘区域进行骨架提取，得到弯管区域的中心轴线；步骤2.4：将弯管中心轴线分割成直线段和椭圆段；步骤3：若在第i个工业相机拍摄的图像中弯管中心轴线被分割成n条直线段，计算任意相邻两个直线段

【技术特征摘要】
1.结合拓扑关系和极线约束的管路三维重建方法，其特征在于，包括以下步骤：步骤1：对多个工业相机进行全局标定，同步触发多个工业相机采集不同视角下放置在背光板上的原始弯管图像；步骤2：对每一幅原始弯管图像进行如下步骤2.1至步骤2.4的处理；步骤2.1：增强原始弯管图像的高频分量获取边缘尖锐的图像：res＝round((orig-mean)*Factor)+orig其中，res表示增强后的图像，orig表示原图像，mean表示由图像线性平滑得到的图像，Factor表示对比度增强系数，round表示四舍五入取整；步骤2.2：对增强后的图像进行亚像素精度边缘提取，滤除干扰边缘得到弯管的边缘区域；步骤2.3：对弯管的边缘区域进行骨架提取，得到弯管区域的中心轴线；步骤2.4：将弯管中心轴线分割成直线段和椭圆段；步骤3：若在第i个工业相机拍摄的图像中弯管中心轴线被分割成n条直线段，计算任意相邻两个直线段的交点作为该幅图像的待匹配点结合直线段和待匹配点记为步骤4：由全局标定得到工业相机的内外参数，并借助极线约束对任意两个工业相机a、b拍摄的两幅图像的待匹配点和进行特征点匹配，得到特征匹配点对，其中m表示工业相机a拍摄图像中弯管中轴线分割的直线段数，s表示工业相机b拍摄图像中弯管中轴线分割的直线段数；步骤5：利用拓扑关系中叉积符号量和直线交比透视投影不变性去除步骤4中特征匹配点对的误匹配点，得到最终的特征匹配点对作为弯管的控制点。2.根据权利要求1所述的结合拓扑关系和极线约束的管路三维重建方法...

【专利技术属性】
技术研发人员：陈月玲，赵吉宾，夏仁波，付生鹏，赵亮，
申请(专利权)人：中国科学院沈阳自动化研究所，
类型：发明
国别省市：辽宁,21