一种基于直方图控制点的图像配准目标检测方法技术

技术编号:15641320 阅读:170 留言:0更新日期:2017-06-16 11:25
本发明专利技术中提出的一种基于直方图控制点的图像配准目标检测方法,其主要内容包括:缩放变量部分表示:直方图控制点(HoCP),HoCP和迭代霍夫森林(IHF)检测算法的组合,6D对象姿态估计,其过程为,先将直方图控制点特征的计算过程描述为缩放变量部分表示,用隐式B样条表示点云,然后将这些尺度变化特征的辨别信息编码到迭代霍夫森林检测算法中,最后,利用学习到的形状信息以粗略到精细的方式细化6D对象姿态估计。本发明专利技术运用了迭代霍夫森林检测算法的控制点直方图的新型架构,能够估计给定候选2D边界框的遮挡和混乱对象的6D姿态,确保了对象姿态的细化,提高在严重闭塞和杂波以及类似的视觉干扰的情况下的配准效果。

【技术实现步骤摘要】
一种基于直方图控制点的图像配准目标检测方法
本专利技术涉及图像配准领域,尤其是涉及了一种基于直方图控制点的图像配准目标检测方法。
技术介绍
目标检测可用于检测图像中的人体以及动物的各个器官、部位,以及食物,家居用品等物品的颜色、种类,它是图像增强、图像恢复、特征提取、特征匹配、图像编码压缩和形状分析等的基础,在计算机视觉、医学图像处理,如肿瘤检测、病变定位、血管造影,还有地质勘探、航空侦察,场景理解、机器人的控制、导航以及材料力学等领域都具有广泛的应用。根据具体应用的不同,有的侧重于通过变换结果融合两幅图像,有的侧重于研究变换本身以获得对象的一些力学属性。图像配准技术经历了从静态到动态,从形态到功能,从平面到立体的飞速发展。迭代最近点(ICP)算法,基于点到模型的方法和点到点技术等,虽然证明了有良好的配准结果,但是这些方法的性能在严重闭塞和杂波以及类似的视觉干扰的情况下效果明显降低。本专利技术提出了一种基于直方图控制点的图像配准目标检测方法,首先将直方图控制点(HoCP)特征的计算过程描述为缩放变量部分表示,用隐式B样条(IBS)表示点云,然后将这些尺度变化特征的辨别信息编码到迭代霍夫森林(IHF)检测算法中,最后,利用学习到的形状信息以粗略到精细的方式细化6D对象姿态估计,通过初始配准大致对准测试对象,通过迭代姿态细化进一步改进。本专利技术运用了迭代霍夫森林检测算法的控制点直方图的新型架构,能够估计给定候选2D边界框的遮挡和混乱对象的6D姿态,确保了对象姿态的细化,提高在严重闭塞和杂波以及类似的视觉干扰的情况下的配准效果。
技术实现思路
针对用户在严重闭塞和杂波以及类似的视觉干扰的情况下效果明显降低等问题,本专利技术的目的在于提供一种基于直方图控制点的图像配准目标检测方法,首先将直方图控制点(HoCP)特征的计算过程描述为缩放变量部分表示,用隐式B样条(IBS)表示点云,然后将这些尺度变化特征的辨别信息编码到迭代霍夫森林(IHF)检测算法中,最后,利用学习到的形状信息以粗略到精细的方式细化6D对象姿态估计,通过初始配准大致对准测试对象,通过迭代姿态细化进一步改进。为解决上述问题,本专利技术提供一种基于直方图控制点的图像配准目标检测方法,其主要内容包括:(一)缩放变量部分表示:直方图控制点(HoCP);(二)HoCP和迭代霍夫森林(IHF)检测算法的组合;(三)6D对象姿态估计。其中,所述的缩放变量部分表示:直方图控制点(HoCP),给定一个正的深度图像,最初将其归一化为一个单位立方体,不同尺度的新点云被采样如下:其中,其中,X=[X,Y,Z]是原始前景点云的坐标向量,是X的平均值,XN=[XN,YN,ZN]是归一化的前景像素,m是尺度的数量,α是比例因子,h是比例;常数si取实数以生成不同尺度的点云,从对应于初始归一化的s0=1开始。进一步地,所述的用隐式B样条(IBS)表示点云,一旦生成一组尺度空间图像,首先用IBS的控制点全局地表示这些点云;IBS通过B样条张量积的组合来定义:其中,{ni,j,k}是定义大小为N×N×N的控制点阵的系数,Bi(x),Bj(y),Bk(z)是样条基函数;该定义可以重新表示为以下内积:f(x)=nTe(x)=e(x)Tn(4)其中,系数向量n包括控制值{ni,j,k},并且基向量e(x)取决于给定数据点,因为它对样条基函数乘积{Bi(x)Bj(y)Bk(z)}进行排序;公式(4)中的基向量为整个点云计算,系数向量n基于3L算法计算;通过以下混合函数构建样条基函数Bi(x),Bj(y),Bk(z):并重新定义公式(3),以便确定被归一化为单位立方体[01]3的点云的控制点矢量n:其中,Δ=1/(N-3)因此,单位立方体被分成N×N×N个体素网格,其中N是IBS分辨率;n中的每个控制点用索引权重对进行定义:索引号表示相关控制点所在的网格的顶点。进一步地,所述的隐式B样条(IBS),IBS将全局表示的规模空间深度图划分为多个部分;在图像像素中表示部分大小g,其也描绘了提取部分的大小与全局点云的边界框之间的比率;提取和表示具有相同大小的部分,即在每个尺度上每个单独像素周围生长的部分占据图像像素中的相同面积,现在扩展为提取大小不同的部分;以度量坐标定义的3D边界框在每个尺度空间图像的单位立方体中遍历,并且在非零像素周围提取部分;在该3D边界框中的数据点的总数对于不同尺度的点云而变化,因此,提取的部分的尺寸不同;每个部分具有其自己的隐含体积表示,由到部件中心的最接近的控制点形成,沿着位于3D边界框内的深度方向;这些部分描述以级联方式表征局部性,在点周围生长具有不同特性的区域;将此信息编码为球面坐标中的直方图,每个零件中心与球体的中心重合,该部分的控制点由半径tr的对数,倾斜度tθ的余弦描述和方位角tφ;然后,将球体划分为二进制数和二进制数vr,vθ,vφ之间的关系,和直方图坐标tr,tθ,tφ,给出如下:其中,rmin和rmax是具有最小和最大体积的嵌套球的半径,x,y,z是具有半径r的每个描述符的笛卡尔坐标;rmax等于贴片中心和相关贴片的最远描述符之间的距离;每个区间中的控制点的数目被计数并存储d=vr*vθ*vφ维特征矢量f中。其中,所述的HoCP和迭代霍夫森林(IHF)检测算法的组合,IHF是随机二进制决策树的组合;它仅仅在感兴趣对象的前景合成渲染的深度图像上被训练;从每个训练点云生成一组尺度空间图像,并采样一组部分{Pi},注释如下:其中,是以像素为单位的部分中心,Δxi=(Δxi,Δyi,Δzi)是零件和物体的中心之间的3D偏移量,是从其提取部分Pi的点云的旋转参数,Di是部分的深度图。进一步地,所述的迭代霍夫森林(IHF)检测算法,每个树通过使用注释训练部分的子集来构造;从中随机选择一个模板补丁T,并将其分配给根节点;测量T和中的每个补丁Si之间的相似性如下:(1)深度检查:检查表示部分Si和T的描述符和Tn的深度值,并去除中的空间不一致的深度值,生成Ω,包括块Si的空间一致的描述符;(2)相似性度量:使用Ω,生成特征向量fΩ,并测量此向量和fT之间的范数:(3)相似性分数比较:根据将相似性度量的分数与随机选择的阈值τ进行比较的分割函数将每个分片传递到左或右子节点;通过使用一组随机分配的分片{Ti}和阈值{τi}来在每个节点处产生一组候选分裂函数;选择最佳优化偏移和姿态回归熵的函数作为分割函数;通过递归地重复该过程来生长每个树,直到满足森林终止标准;当满足终止条件时,形成叶节点,并且它们存储对于对象中心Δx=(Δx,Δy,Δz)和对象旋转θ=(θr,θp,θy);根据零件提取方法,中的所有零件,如公式(8),可以具有相同的大小或可变的大小;从现在开始,把可变尺寸部件上训练的森林称为IHF可变尺寸,通过使用固定尺寸部分作为IHF固定尺寸学习的森林。其中,所述的6D对象姿态估计,将尺度变量HoCP特征的判别信息编码到森林中,接下来演示对象的6D姿态估计,认为学习的森林是IHF变量大小;所提出的架构在两个步骤中配准对象:初始配准和迭代姿态细化。进一步地,所述的初始配准,大致对准测试对象,并且该对准通过迭代姿态细化进一步改进;考虑由粗边界框Ib检测到的对象,在迭代时刻k,定义以下量本文档来自技高网...
一种基于直方图控制点的图像配准目标检测方法

【技术保护点】
一种基于直方图控制点的图像配准目标检测方法,其特征在于,主要包括缩放变量部分表示:直方图控制点(HoCP)(一);HoCP和迭代霍夫森林(IHF)检测算法的组合(二);6D对象姿态估计(三)。

【技术特征摘要】
1.一种基于直方图控制点的图像配准目标检测方法,其特征在于,主要包括缩放变量部分表示:直方图控制点(HoCP)(一);HoCP和迭代霍夫森林(IHF)检测算法的组合(二);6D对象姿态估计(三)。2.基于权利要求书1所述的缩放变量部分表示:直方图控制点(HoCP)(一),其特征在于,给定一个正的深度图像,最初将其归一化为一个单位立方体,不同尺度的新点云被采样如下:其中,其中,X=[X,Y,Z]是原始前景点云的坐标向量,是X的平均值,XN=[XN,YN,ZN]是归一化的前景像素,m是尺度的数量,α是比例因子,h是比例;常数si取实数以生成不同尺度的点云,从对应于初始归一化的s0=1开始。3.基于权利要求书2所述的用隐式B样条(IBS)表示点云,其特征在于,一旦生成一组尺度空间图像,首先用IBS的控制点全局地表示这些点云;IBS通过B样条张量积的组合来定义:其中,{ni,j,k}是定义大小为N×N×N的控制点阵的系数,Bi(x),Bj(y),Bk(z)是样条基函数;该定义可以重新表示为以下内积:f(x)=nTe(x)=e(x)Tn(4)其中,系数向量n包括控制值{ni,j,k},并且基向量e(x)取决于给定数据点,因为它对样条基函数乘积{Bi(x)Bj(y)Bk(z)}进行排序;公式(4)中的基向量为整个点云计算,系数向量n基于3L算法计算;通过以下混合函数构建样条基函数Bi(x),Bj(y),Bk(z):并重新定义公式(3),以便确定被归一化为单位立方体[01]3的点云的控制点矢量n:其中,Δ=1/(N-3)因此,单位立方体被分成N×N×N个体素网格,其中N是IBS分辨率;n中的每个控制点用索引权重对进行定义:索引号表示相关控制点所在的网格的顶点。4.基于权利要求书3所述的隐式B样条(IBS),其特征在于,IBS将全局表示的规模空间深度图划分为多个部分;在图像像素中表示部分大小g,其也描绘了提取部分的大小与全局点云的边界框之间的比率;提取和表示具有相同大小的部分,即在每个尺度上每个单独像素周围生长的部分占据图像像素中的相同面积,现在扩展为提取大小不同的部分;以度量坐标定义的3D边界框在每个尺度空间图像的单位立方体中遍历,并且在非零像素周围提取部分;在该3D边界框中的数据点的总数对于不同尺度的点云而变化,因此,提取的部分的尺寸不同;每个部分具有其自己的隐含体积表示,由到部件中心的最接近的控制点形成,沿着位于3D边界框内的深度方向;这些部分描述以级联方式表征局部性,在点周围生长具有不同特性的区域;将此信息编码为球面坐标中的直方图,每个零件中心与球体的中心重合,该部分的控制点由半径tr的对数,倾斜度tθ的余弦描述和方位角tφ;然后,将球体划分为二进制数和二进制数vr,vθ,vφ之间的关系,和直方图坐标tr,tθ,tφ,给出如下:其中,rmin和rmax是具有最小和最大体积的嵌套球的半径,x,y,z是具有半径r的每个描述符的笛卡尔坐标;rmax等于贴片中心和相...

【专利技术属性】
技术研发人员:夏春秋
申请(专利权)人:深圳市唯特视科技有限公司
类型:发明
国别省市:广东,44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1