基于彩色图像的滚转物单目位姿测量方法技术

本发明专利技术基于彩色图像的滚转物单目位姿测量方法属于计算机视觉领域，涉及一种在风洞环境下使用单目视觉原理结合自发光编码标志点进行滚转体模型位姿测量。该测量方法采用环绕式分组排列的方式将彩色编码的自发光标志点布置在被测物体的表面，利用单目视觉系统对滚转体目标进行X、Y、Z方向的位移和俯仰角、偏航角、滚转角六参数位姿测量。以目标物表面彩色编码自发光标志点作为特征标记，采集运动目标表面彩色编码特征图像，在高速摄像机标定的基础上，经彩色编码标记特征的识别和提取的图像处理步骤后，求解出滚转体目标位置姿态信息。本发明专利技术采用单目摄像机配合彩色图像进行测量，测量效率高，设备简单的特点，适用范围广。

【技术实现步骤摘要】
基于彩色图像的滚转物单目位姿测量方法
本专利技术属于计算机视觉测量
，涉及一种适用于伴随滚转运动回转体的空间位置和姿态测量方法。
技术介绍
随着航天、航空技术的逐步完善和提高，飞行器及其投放物执行任务过程中的位姿信息测量在飞行器设计和试验阶段有着极其重要的作用。机器视觉测量技术具有非接触、灵活性、测量精度高等优点，被广泛用于飞行器及其投放模型的位姿测量中。滚转物体在实际运动过程中移动速度快、运动空间大的特点对运动物体的位姿测量提出了更高的要求。大连理工大学刘巍等人2014年在航空学报发表的《基于彩色编码的副油箱风洞模型位姿测量方法》中提出了基于彩色编码图像的副油箱位姿测量方法，利用彩色编码的自发光标记点进行图像匹配，解决了低照度条件下目标标记亮度不足和由于物体滚转造成的标记点消隐现象。但双目测量系统的测量视场只有两台摄像机视场相交的部分，物体运动范围较大时很难保证其始终在测量视场内。北京宇航系统工程研究所谌德荣等人专利技术专利号了为CN103512559A《一种弹丸单目视频位姿测量方法及靶标图案》提出一种适用于弹丸的单目视频位姿测量方法，采用视场较大的单目摄像机结合弹丸外圆周表面的分区域靶标图案对弹丸的运动位姿进行测量。但该方法采用的靶标图案与弹丸表面仅通过颜色对比进行区分，在光照不足的条件下会造成图像特征轮廓不清晰或标记特征无法提取的情况。
技术实现思路
本专利技术要解决的技术难题是克服现有技术的问题，专利技术一种基于彩色图像的滚转物单目位姿测量方法，单目视觉系统测量滚转物位姿的特征是仅使用一台高速摄像机采集目标物图像，克服了传统双目视觉系统测量视场小，难以覆盖目标整个运动空间的问题；与使用两台摄像机进行测量的双目系统相比，单目测量系统设备简单；此外，无需考虑两台摄像机同时触发的问题；沿回转体圆周方向均匀分布的自发光标志点可以解决物体滚转时图像特征被遮挡的问题，利用环绕式彩色编码的方式对标记点进行编码，无需特征匹配即可实现运动目标的位姿测量，满足单目测量要求。同时，简化图像处理流程，提高测量效率，并且保证测量结果有很好的精度。本专利技术所采用的技术方案是一种基于彩色图像的滚转物单目位姿测量方法，其特征是，测量方法采用环绕式分组排列的方式将彩色编码的自发光标志点布置在被测物体的表面，利用单目视觉系统对滚转体目标进行X、Y、Z方向的位移和俯仰角、偏航角、滚转角六参数位姿测量；以目标物表面彩色编码自发光标志点作为特征标记，采集运动目标表面彩色编码特征图像，在高速摄像机标定的基础上，经彩色编码标记特征的识别和提取的图像处理步骤后，求解出滚转体目标位置姿态信息；测量方法的具体步骤如下：1、彩色特征点的编码本专利技术采用环绕式分组排列的方式将彩色编码的自发光标志点布置在被测物体的表面，标志点分为两组，每组含有一定数量的编码标志点，以周向均布方式分布在被测物体的表面，标记点的数量根据具体测量视场的大小和被测回转体直径的大小决定，必须保证在每一帧图像上至少有三个特征点，才能以此拟合出被测回转体的圆心；用标记点的颜色信息作为其编码信息，每种颜色采用一定的代码进行标记；几个连续的编码标志点组成一个编码片段，即代码数组；编码组中任意两编码片段因所含标志点颜色顺序不同而使各编码片段都是唯一的；编码颜色和编码片段长度根据标记点的个数来确定，且编码片段长度至少为3，才能保证一组中编码组各不相同；最后将代码代入编码组得到每个标记点的编码；2、进行高速摄像机的标定本专利技术采用张正友基于平面标定板的标定方法对高速摄像机进行标定，其具体标定过程如下：首先将精密加工的二维棋盘格标定板放置在物体运动的平面附近，并将标定板摆放多个位置，同时触发高速摄像机拍摄标定板的多幅图像，通过标定板上每个特征点和其像平面的像点间的对应关系来标定摄像机，得到摄像机的内外参数，然后利用各靶标角点坐标与实际坐标的偏差构建目标函数f(x)并利用优化算法对内外参数进行整体优化；目标函数公式如下：f(x)＝(Xw-Xd)2+(Yw-Yd)2+(Zw-Zd)2(1)其中：Xw，Yw，Zw表示各特征角点在世界坐标系中的坐标，而Xd，Yd，Zd为采用摄像机标定参数重建得到的对应特征角点的坐标，则可建立目标函数F(x)如下：其中，N为特征点的个数，为所有特征角点偏差函数的平方和，应用LM方法对该目标函数F(x)进行优化，进而得摄像机内外参数的全局最优解；3、彩色图像特征的识别和提取1)彩色编码特征的识别本专利技术采用基于RGB的图像分割原理对彩色标记点的颜色信息进行识别，将图像特征分解为红、绿、蓝三个互相独立的颜色通道(用R、G、B表示)，每个通道的灰度范围都是0～255，根据欧几里德距离公式判断图像上像素点的颜色是否与某一颜色之间的相似度是否小于所设阈值T，进而判断出该像素点特征所属的颜色，欧几里德距离公式表示为：D(z,m)＝||z-m||＝[(z-m)T(z-m)]1/2＝[(zR-mR)2+(zG-mG)2+(zB-mB)2]1/2(3)其中，m为某一颜色的RGB向量，z表示该像素点的RGB向量，下标R、G、B表示向量m和z的RGB分量；在解码时，采用曲线拟合的方法找出图像特征标记所组成的环形曲线，然后将标记点按该曲线串联排序，按顺序写出图像中标记点的片段代码数组并与标记点编码数组列表进行对比，找到与之完全相同的数组，便可确定图像中标记点与编码组中标记点的对应关系，从而得知所采集片段在整个编码组中的位置；2)标记点的提取本专利技术采用梯度重心法提取被测类圆柱体表面的编码标记点，首先使用高斯一阶微分算子对被测类圆柱体运动图像进行卷积处理，获得二维图像上各点的灰度梯度，图像特征标记所在区域的梯度重心点坐标用下式表示：其中：C为应用梯度重心法所提取的标记中心像素的坐标值，(i,j)点的梯度幅值用|G(i,j)|表示，w，h分别为二维图像的宽和高，(i,j)点的图像坐标表示为P(i,j)；4、目标物位姿求取选取滚转物体表面的三个特征点A，B，C，通过求解方程组：解出hA,hB，hC的值；其中hA,hB，hC分别为A，B，C与摄像机光心O之间的距离，A，B，C两两组成的三条直线之间的夹角为α，β，γ，并且三个特征点之间的距离表示为：|AB|＝c，|AC|＝b，|BC|＝a；设A′，B′，C′分别是A，B，C在摄像机平面上的对应点，求出hA,hB，hC后，利用A′，B′，C′坐标，根据摄像机的成像关系，解算出特征点在摄像机坐标系下的坐标，再通过摄像机的标定参数将该坐标转换到物体在世界坐标系下的坐标，即求出被测目标的初始位姿参数；最后通过图像上其余特征标记对目标的初始位姿参数进行优化，得出运动目标的准确位姿信息；本专利技术的有益效果是利用单目视觉系统配合环绕式布局彩色编码标志点解决滚转类运动目标位姿测量过程中由于物体滚转导致的标记特征被遮挡问题。并且单目系统测量视场大、测量设备简单，保证摄像机视场能完全覆盖物体运动的空间，减少位姿测量时间和设备成本。同时，采用环绕式组合编码的方式对彩色特征进行编码，结合图像识别、提取等图像处理过程求取运动目标的位姿参数，解决单目测量系统要求特征标记几何约束已知的问题。附图说明图1为基于彩色图像的滚转物单目位姿测量方法原理图。其中，1-高速摄像机，2-被测回转体，3-彩本文档来自技高网...

【技术保护点】
一种基于彩色图像的滚转物单目位姿测量方法，其特征是，测量方法采用环绕式分组排列的方式将彩色编码的自发光标志点布置在被测物体的表面，利用单目视觉系统对滚转体目标进行X、Y、Z方向的位移和俯仰角、偏航角、滚转角六参数位姿测量；以目标物表面彩色编码自发光标志点作为特征标记，采集运动目标表面彩色编码特征图像，在高速摄像机标定的基础上，经彩色编码标记特征的识别和提取的图像处理步骤后，求解出滚转体目标位置姿态信息；测量方法的具体步骤如下：1)彩色特征点的编码本专利技术采用环绕式分组排列的方式将彩色编码的自发光标志点布置在被测物体的表面，标志点分为两组，每组含有一定数量的编码标志点，以周向均布方式分布在被测物体的表面，标记点的数量根据具体测量视场的大小和被测回转体直径的大小决定，必须保证在每一帧图像上至少有三个特征点，并以此拟合出被测回转体的圆心；用标记点的颜色信息作为其编码信息，每种颜色采用一定的代码进行标记；几个连续的编码标志点组成一个编码片段，即代码数组；编码组中任意两编码片段因所含标志点颜色顺序不同而使各编码片段都是唯一的；编码颜色和编码片段长度根据标记点的个数来确定，且编码片段长度至少为3，以保证一组中编码组各不相同；最后将代码代入编码组得到每个标记点的编码；2)进行高速摄像机的标定本专利技术采用张正友基于平面标定板的标定方法对高速摄像机进行标定，其具体标定过程如下：首先，将精密加工的二维棋盘格标定板放置在物体运动的平面附近，并将标定板摆放多个位置，同时触发高速摄像机拍摄标定板的多幅图像，通过标定板上每个特征点和其像平面的像点间的对应关系来标定摄像机，得到摄像机的内外参数；然后，利用各靶标角点坐标与实际坐标的偏差构建目标函数f(x)并利用优化算法对内外参数进行整体优化；目标函数公式如下：f(x)＝(Xw‑Xd)2+(Yw‑Yd)2+(Zw‑Zd)2          (1)其中：Xw，Yw，Zw表示各特征角点在世界坐标系中的坐标，而Xd，Yd，Zd为采用摄像机标定参数重建得到的对应特征角点的坐标，则可建立目标函数F(x)如下：F(x)=minΣi=1Nf(x)2---(2)]]>其中，N为特征点的个数，为所有特征角点偏差函数的平方和，应用LM方法对该目标函数F(x)进行优化，进而得摄像机内外参数的全局最优解；3)彩色图像特征的识别和提取(1)彩色编码特征的识别本专利技术采用基于RGB的图像分割方法对彩色标记点的颜色信息进行识别，将图像特征分解为红、绿、蓝三个互相独立的颜色通道分别用R、G、B表示；每个通道的灰度范围都是0～255，根据欧几里德距离公式判断图像上像素点的颜色是否与某一颜色之间的相似度是否小于所设阈值T，进而判断出该像素点特征所属的颜色，欧几里德距离公式表示为：D(z,m)＝||z‑m||＝[(z‑m)T(z‑m)]1/2＝[(zR‑mR)2+(zG‑mG)2+(zB‑mB)2]1/2                                                  (3)其中，m为某一颜色的RGB向量，z表示该像素点的RGB向量，下标R、G、B表示向量m和z的RGB分量；在解码时，采用曲线拟合的方法找出图像特征标记所组成的环形曲线，然后将标记点按该曲线串联排序，按顺序写出图像中标记点的片段代码数组并与标记点编码数组列表进行对比，找到与之完全相同的数组，确定图像中标记点与编码组中标记点的对应关系，从而得知所采集片段在整个编码组中的位置；(2)标记点的提取本专利技术采用梯度重心法提取被测类圆柱体表面的编码标记点，首先，使用高斯一阶微分算子对被测类圆柱体运动图像进行卷积处理，获得二维图像上各点的灰度梯度，图像特征标记所在区域的梯度重心点坐标用下式表示：C=Σi=-hhΣj=-ww[|G(i,j)|·P(i,j)]/Σi=-hhΣj=-ww|G(i,j)|---(4)]]>其中：C为应用梯度重心法所提取的标记中心像素的坐标值，(i,j)点的梯度幅值用|G(i,j)|表示，w，h分别为二维图像的宽和高，(i,j)点的图像坐标表示为P(i,j)；4)目标物位姿求取选取滚转物体表面的三个特征点A，B，C，通过求解方程组：hA2+hB2+2hAhBcosα=c2hA2+hC2+2hAhCcosβ=b2hB2+hC2+2hBhCcosγ=a2---(5)]]>解出hA,hB，hC的值；其中hA,hB，hC分别为A，B，C与摄像机光心O之间的距离，A，B，C两两组成的三条直线之间的夹角为α，β，γ，并且三个特征点之间的距离表示为：|AB|＝c，|AC|＝b，|BC|＝a；设A′，B′，C′分别是A，B，C在摄像机平面上的对应...

【技术特征摘要】
1.一种基于彩色图像的滚转物单目位姿测量方法，其特征是，测量方法采用环绕式分组排列的方式将彩色编码的自发光标志点布置在被测物体的表面，利用单目视觉系统对滚转物目标进行X、Y、Z方向的位移和俯仰角、偏航角、滚转角六参数位姿测量；以滚转物表面彩色编码自发光标志点作为特征标记，采集运动目标表面彩色编码特征图像，在高速摄像机标定的基础上，经彩色编码标记特征的识别和提取的图像处理步骤后，求解出滚转物目标位置姿态信息；测量方法的具体步骤如下：1)彩色标志点的编码本测量方法采用环绕式分组排列的方式将彩色编码的自发光标志点布置在被测物体的表面，标志点分为两组，每组含有一定数量的编码标志点，以周向均布方式分布在被测物体的表面，标志点的数量根据具体测量视场的大小和被测滚转物直径的大小决定，必须保证在每一帧图像上至少有三个标志点，并以此拟合出被测滚转物的圆心；用标志点的颜色信息作为其编码信息，每种颜色采用一定的代码进行标记；几个连续的编码标志点组成一个编码片段，任意两编码片段因所含标志点颜色顺序不同而使各编码片段都是唯一的；编码颜色和编码片段长度根据标志点的个数来确定，且编码片段长度至少为3，以保证一组中编码各不相同；最后将各编码片段代入编码组得到每个标志点的编码；2)进行高速摄像机的标定本测量方法采用张正友基于平面标定板的标定方法对高速摄像机进行标定，其具体标定过程如下：首先，将精密加工的二维棋盘格标定板放置在物体运动的平面附近，并将标定板摆放多个位置，同时触发高速摄像机拍摄标定板的多幅图像，通过标定板上每个标志点和其像平面的像点间的对应关系来标定摄像机，得到摄像机的内外参数；然后，利用各标志点坐标与实际坐标的偏差构建目标函数f(x)并利用优化算法对内外参数进行整体优化；目标函数公式如下：f(x)＝(Xw-Xd)2+(Yw-Yd)2+(Zw-Zd)2(1)其中：Xw，Yw，Zw表示各特征角点在世界坐标系中的坐标，而Xd，Yd，Zd为采用摄像机标定参数重建得到的对应特征角点的坐标，则可建立目标函数F(x)如下：其中，N为特征点的个数，为所有特征角点偏差函数的平方和，应用LM方法对该目标函数F(x)进行优化，进而得摄像机内外参数的全局最优解；3)彩色图像特征的识别和提取(1)彩色编码特征的识别本测量方法采用基于RGB的图像分割方法对彩色标志点的颜色信息进行识别，将图像特征分解为红、绿、蓝三个互相独立的颜色通道分别用R、G、...

【专利技术属性】
技术研发人员：刘巍，陈玲，贾振元，李肖，马鑫，尚志亮，
申请(专利权)人：大连理工大学，
类型：发明
国别省市：辽宁;21