一种基于深度霍夫变换的多传感器外参在线标定方法技术

本发明专利技术涉及相机标定技术领域，尤其涉及一种基于深度霍夫变换的多传感器外参在线标定方法，包括如下步骤：首先对相机的内参进行标定；对深度相机进行深度矫正，当做针孔模型标定得到内参；对投影后的图像进行线特征检测；同样对2D相机的图像进行线检测，获得2D相机的带有语义的线特征信息；利用刚体变换得到深度值在相机坐标系下的位置；通过迭代方程使2D相机和深度相机的投影残差下降，迭代的终止条件是变化量小于阈值。本发明专利技术首次提出应用视觉检测技术对无标定物场景相机外参的在线标定的方法，可以保证系统在运行过程中对其进行自动标定，有效提升系统可靠，减少人工工作量，节省人工成本。人工成本。

【技术实现步骤摘要】
一种基于深度霍夫变换的多传感器外参在线标定方法


[0001]本专利技术涉及相机标定
，尤其涉及一种基于深度霍夫变换的多传感器外参在线标定方法。

技术介绍

[0002]在现有的相机标定技术中，都是通过预先设定的外参进行工作。又或者通过增加标定物来进行在线标定。在图像测量过程中以及机器视觉应用中，需提前知道相机之间的外参关系，标定结果的精度及方法的稳定性直接影响相机工作产生结果的准确性。而系统在长时间的运行后，由于震动，温度等原因会导致外参逐渐失效。而通过增加标定物的方法会导致标定效率低，又或者碰到无法增加标定物的情况。因此，本专利技术要解决的技术问题是：克服实际使用过程中，因非系统因素产生的外参漂移，外参失效等问题，提升系统的稳定性。

技术实现思路

[0003]基于
技术介绍
存在的技术问题，本专利技术提出了一种基于深度霍夫变换的多传感器外参在线标定方法，首次提出应用视觉检测技术对无标定物场景相机外参的在线标定的方法，可以保证系统在运行过程中对其进行自动标定，有效提升系统可靠，减少人工工作量，节省人工成本，解决了实际使用过程中，因非系统因素产生的外参漂移，外参失效问题。
[0004]本专利技术提供如下技术方案：一种基于深度霍夫变换的多传感器外参在线标定方法，包括如下步骤：步骤一：首先通过张正友标定法对相机的内参进行标定；步骤二：对深度相机进行深度矫正，当做针孔模型标定得到内参；步骤三：将深度相机获得的点云投影到图像平面，然后对投影后的图像进行线特征检测；步骤四：同样对2D相机的图像进行线检测，获得2D相机的带有语义的线特征信息；步骤五：检测出来的深度线特征和2D相机的线特征匹配，利用刚体变换得到深度值在相机坐标系下的位置；步骤六：利用相机针孔模型，对于每一个深度值通过当前的估计外参投影到相机平面；步骤七：通过迭代方程使2D相机和深度相机的投影残差下降，迭代的终止条件是变化量小于阈值。
[0005]优选的，所述步骤三中采用DeepHoughTransform提取图像中带语义的线特征信息。
[0006]优选的，所述步骤三中将深度相机获得的点云投影到图像平面，然后对投影后的图像进行线特征检测，并把线与线的交点当做候选点。
[0007]优选的，所述步骤四中同样对2D相机的图像进行线检测，获得2D相机的带有语义
的线特征信息，并把线与线的交点当做候选点。
[0008]优选的，所述步骤六中利用相机针孔模型，对于每一个特征点通过当前的估计外参投影到相机平面。
[0009]本专利技术提供了一种基于深度霍夫变换的多传感器外参在线标定方法，首次提出应用视觉检测技术对无标定物场景相机外参的在线标定的方法，可以保证系统在运行过程中对其进行自动标定，有效提升系统可靠，减少人工工作量，节省人工成本。在常规的在线标定方法过程中，普遍采用标准参照物目标，但是存在某一些不能设置参照物的工作场景，本专利技术利用深度霍夫变换和传统标定方法相结合。
具体实施方式
[0010]下面对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0011]有别于现有的视觉标定技术，仅需保证在多个相机中存在共同视野。本专利技术提出一种基于深度霍夫变换（Deep Hough Transform）的多传感器相对外参在线标定方法。本专利技术利用图像检测技术，检测图像或红外图或深度图或点云中的线特征，最小化重投影得到准确外参。即可获得相机或传感器的相对外参既外参标定。现以2D相机和深度相机标定进行举例。
[0012]实施例一：本专利技术提供如下技术解决方案：步骤一：首先通过张正友标定法对相机的内参进行标定。
[0013]步骤二：对深度相机进行深度矫正，当做针孔模型标定得到内参。
[0014]步骤三：将深度相机获得的点云投影到图像平面，然后对投影后的图像进行线特征检测，本专利技术采用DeepHoughTransform提取图像中带语义的线特征信息。
[0015]步骤四：同样对2D相机的图像进行线检测，获得2D相机的带有语义的线特征信息。
[0016]步骤五：检测出来的深度线特征和2D相机的线特征匹配，利用刚体变换可以得到深度值在相机坐标系下的位置。
[0017]步骤六：利用相机针孔模型，对于每一个深度值通过当前的估计外参（不准确）投影到相机平面。
[0018]步骤七：通过迭代方程使2D相机和深度相机的投影残差下降，迭代的终止条件是变化量小于阈值。
[0019]本专利技术利用图像检测技术，检测图像或红外图或深度图或点云中的线特征，再将线与线的交点，最小化重投影得到准确外参。获得相机或传感器的相对外参既外参标定。现以2D相机和深度相机标定进行举例。
[0020]实施例二：本专利技术提供如下技术解决方案：步骤一：首先通过张正友标定法对相机的内参进行标定。
[0021]步骤二：对深度相机进行深度矫正，当做针孔模型标定得到内参。
[0022]步骤三：将深度相机获得的点云投影到图像平面，然后对投影后的图像进行线特征检测，本专利技术采用DeepHoughTransform提取图像中带语义的线特征信息，并把线与线的
交点当做候选点。
[0023]步骤四：同样对2D相机的图像进行线检测，获得2D相机的带有语义的线特征信息，并把线与线的交点当做候选点。
[0024]步骤五：利用相机针孔模型，对于每一个特征点通过当前的估计外参（不准确）投影到相机平面。
[0025]步骤六：通过迭代方程使2D相机和深度相机的投影残差下降，迭代的终止条件是变化量小于阈值。
[0026]本专利技术中，首次提出应用视觉检测技术对无标定物场景相机外参的在线标定的方法，可以保证系统在运行过程中对其进行自动标定，有效提升系统可靠，减少人工工作量，节省人工成本。在常规的在线标定方法过程中，普遍采用标准参照物目标，但是存在某一些不能设置参照物的工作场景，本专利技术利用深度霍夫变换和传统标定方法相结合。
[0027]以上所述，仅为本专利技术较佳的具体实施方式，但本专利技术的保护范围并不局限于此，任何熟悉本
的技术人员在本专利技术揭露的技术范围内，根据本专利技术的技术方案及其专利技术构思加以等同替换或改变，都应涵盖在本专利技术的保护范围之内。
本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于深度霍夫变换的多传感器外参在线标定方法，其特征在于：包括如下步骤：步骤一：首先通过张正友标定法对相机的内参进行标定；步骤二：对深度相机进行深度矫正，当做针孔模型标定得到内参；步骤三：将深度相机获得的点云投影到图像平面，然后对投影后的图像进行线特征检测；步骤四：同样对2D相机的图像进行线检测，获得2D相机的带有语义的线特征信息；步骤五：检测出来的深度线特征和2D相机的线特征匹配，利用刚体变换得到深度值在相机坐标系下的位置；步骤六：利用相机针孔模型，对于每一个深度值通过当前的估计外参投影到相机平面；步骤七：通过迭代方程使2D相机和深度相机的投影残差下降，迭代的终止条件是变化量小于阈值。2.根据权利要求1所述的一种基于深度霍夫变换的多传感器外参在线标...

【专利技术属性】
技术研发人员：褚怡文，李颖，赵准登，
申请(专利权)人：聚时科技江苏有限公司，
类型：发明
国别省市：