当前位置: 首页 > 专利查询>中南大学专利>正文

一种基于ORB特征的实时全景视频拼接方法和装置制造方法及图纸

技术编号:9571818 阅读:211 留言:0更新日期:2014-01-16 04:33
本发明专利技术公开了一种基于ORB特征的实时全景视频拼接方法。包括以下步骤:开启采集多路同步视频数据;对同一时刻的各路图像进行预处理即把彩色图像变成256级的灰度图像,并对图像采用高斯滤波器进行去噪处理;采用ORB特征提取算法对同一时刻的各路图像进行特征点提取并计算各特征点的ORB特征向量;采用最邻近匹配法和RANSAC(随机抽样一致性)匹配算法求出同步视频对应帧间的单应性矩阵;根据单应性矩阵进行视频帧场景的拼接;最后输出拼接后的视频。本发明专利技术的优点在于使得图像拼接过程中的特征提取速度和匹配效果得到很大的提高。

【技术实现步骤摘要】
一种基于ORB特征的实时全景视频拼接方法和装置所属
本专利技术属于计算机视觉图像处理
,特别是涉及一种基于ORB特征的实时全景视频拼接方法和装置。
技术介绍
图像拼接技术就是将数张有部分重叠的图像拼成一幅大型的无缝高分辨率图像的技术。使用普通相机获取宽视野的场景图像,因为相机的分辨率一定,拍摄的场景越大,得到的图像分辨率越低;而全景相机、广角镜头等不仅非常昂贵,且失真严重。为了在不降低图像分辨率的条件下获取超宽视野,甚至360°的全景图,出现了利用计算机进行图像拼接方法,该方法在近两年发展速度较快。现在图像拼接技术已经成为计算机图形学的研究焦点,被广泛应用于空间探测、遥感图像处理、医学图像分析、视频压缩和传输、虚拟现实技术、超分辨率重构等领域。图像配准和图像融合是图像拼接的两个关键技术。图像配准是图像融合的基础,而且图像配准算法的计算量一般非常大,因此图像拼接技术的发展很大程度上取决于图像配准技术的创新。专利申请号200810237427.8采用SIFT特征点进行图片配准,虽然可以保证匹配的精度,但是运算量比较大。专利申请号201010587394.7采用SURF特征进行图像配准,算法的复杂度得到了降低,但是它只对视频的前几帧图像进行了配准,不能保证在摄像头抖动等情况下的图像拼接效果。专利申请号200910153173.6采用DSP和广角镜头来做前景视觉泊车辅助装置,但是广角镜头的内部参数K和失真系数是事先通过固定位置获取的,对于不同的车型和摄像头震动适应性不强。因此迫切需要一种考虑能处理摄像头旋转和抖动、被拍摄物体尺寸和光照变化的实时全景视频拼接方法和装置。
技术实现思路
本专利技术的目的是提供一种基于ORB特征的全景视频实时拼接方法及装置,以解决视频中单帧图像拼接计算量大以及视频拼接速度慢等技术难题。为达到上述目的,本专利技术一方面提出了一种基于ORB特征的全景视频实时拼接方法,包括以下步骤:步骤I开始操作,采集多路同步视频数据;步骤2对同一时刻的各路图像进行预处理即把彩色图像变成256级的灰度图像,并对图像采用高斯滤波器进行去噪处理;步骤3采用ORB特征提取算法对同一时刻的各路图像进行特征点提取并计算各特征点的ORB特征向量;步骤4采用最邻近匹配法和RANSAC (随机抽样一致性)匹配算法求出同步视频对应帧间的单应性矩阵;步骤5根据单应性矩阵进行视频帧场景的拼接;步骤6输出拼接后的视频。如上所述步骤3中,采用ORB特征提取算法对同一时刻的多路图像进行特征点提取并计算各特征点的特征向量,其步骤包括:步骤3-1:检测以候选特征点为圆心、r为半径的圆周上点的像素值,如果圆周上有足够多的连续点与该候选点的灰度值差值大于阈值d,则认为该候选点为一个特征点。本文档来自技高网
...

【技术保护点】
一种基于ORB特征的全景视频实时拼接方法,其特征在于,包括以下步骤:步骤1开始操作,采集多路同步视频数据;步骤2对同一时刻的各路图像进行预处理即把彩色图像变成256级的灰度图像,并对图像采用高斯滤波器进行去噪处理;步骤3采用ORB特征提取算法对同一时刻的各路图像进行特征点提取并计算各特征点的ORB特征向量;步骤4采用最邻近匹配法和RANSAC(随机抽样一致性)匹配算法求出同步视频对应帧间的单应性矩阵;步骤5根据单应性矩阵进行视频帧场景的拼接;步骤6输出拼接后的视频。

【技术特征摘要】
1.一种基于ORB特征的全景视频实时拼接方法,其特征在于,包括以下步骤: 步骤I开始操作,采集多路同步视频数据; 步骤2对同一时刻的各路图像进行预处理即把彩色图像变成256级的灰度图像,并对图像采用高斯滤波器进行去噪处理; 步骤3采用ORB特征提取算法对同一时刻的各路图像进行特征点提取并计算各特征点的ORB特征向量; 步骤4采用最邻近匹配法和RANSAC (随机抽样一致性)匹配算法求出同步视频对应帧间的单应性矩阵; 步骤5根据单应性矩阵进行视频帧场景的拼接; 步骤6输出拼接后的视频。2.根据权利要求1所述的步骤2中对同一时刻的各路图像进行预处理即把彩色图像变成256级的灰度图像,并对图像采用高斯滤波器进行去噪处理。具体包括以下步骤: 步骤 2-1:彩色图像变成灰度图像:Gray(x, y) = 0.3R(x, y) +0.59G(x, y) +0.11Β(χ,y); 步骤2-2:高斯滤波去噪处理,高斯滤波模板为:3.根据权利要求1所述的步骤3中,采用ORB特征提取算法对同一时刻的多路图像进行特征点提取并计算各特征点的特征向量,其特征在于,其步骤包括: 步骤3-1:检测以候选特征点为圆心、r为半径的圆周上点的像素值,如果圆周上有足够多的连续点与该候选点的灰度值差值大于阈值d,则认为该候选点为一个特征点。 4.根据权利要求1所述的步骤4中,采用最邻近匹配法、RANSAC(随机抽样一致性)匹配算法求出视频初始对应帧间的单应性矩阵,其...

【专利技术属性】
技术研发人员:许雪梅黄征宇张键洋杜捷李丽娴李岸周立超陶少华尹林子
申请(专利权)人:中南大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1