一种视频拼接的方法与装置制造方法及图纸

本发明专利技术实施例公开了一种视频拼接的方法与装置，当待处理视频帧为特定视频帧时，则将所述待处理视频帧和所述待处理视频帧对应的相邻视频帧之间的图像重叠区域作为ROI视频图像；对该ROI视频图像进行显著性区域检测，并利用SURF算法对所述显著性区域进行特征点检测，利用最近邻与次近邻比算法对所述特征点进行粗匹配；利用RANSAC算法对粗匹配后的特征点进行提纯，计算出所述特征点对应的投影变换矩阵；从而利用所述投影变换矩阵对所述待处理视频帧以及所述相邻视频帧进行融合、拼接，得到目标视频帧。按照上述操作方式，提高了视频帧特征点检测的效率以及匹配的准确率，满足了视频拼接对实时处理速度的要求。

Video stitching method and device

The embodiment of the invention discloses a method and a device for video stitching, when processing video frames for a particular video frame, the image overlap region of the processed video frames and the processed video frames corresponding adjacent video frames as ROI video image; the video image was ROI area detection, and the detection of feature points on the salient regions by using the SURF algorithm, using the nearest and second nearest neighbor ratio algorithm for the feature point matching of feature points of coarse coarse; after matching was purified by using the RANSAC algorithm, the projection transformation matrix corresponding to the feature points are calculated; and the the processed video frame and the adjacent video frames were fused, spliced by the projection transformation matrix, obtain the target video frame. According to the above operation mode, the efficiency of video frame feature detection and the accuracy of matching are improved, which meets the requirement of video stitching in real-time processing.

【技术实现步骤摘要】
一种视频拼接的方法与装置
本专利技术涉及视频处理
，特别是涉及一种视频拼接的方法与装置。
技术介绍
单个或固定摄像头的视野范围有限，为了获取单帧图像中更广阔的视觉效果，需要使用视频拼接技术，即将多个固定摄像头或单个移动摄像头的内容进行拼接组合形成分辨率更高，内容更丰富的图像或视频。目前的拼接技术主要应用在交通行业的视频实时监控领域，研究也主要集中在对摄像机位置相对固定的交通监控视频的拼接上。算法相对比较成熟的是对静态图像的拼接，视频拼接技术主要利用视频图像帧之间的相关性，拼接过程中涉及到大量的计算，这就需要在保证画面质量的前提下，选取一种快速的匹配算法，以减少整个视频拼接的计算量，提高视频拼接速度。关于视频拼接原理和方法国内外已有不少的研究成果，但是现在还没有通用的能够达到实时处理速度的视频拼接方式。可见，如何满足视频拼接对实时处理速度的要求，是本领域技术人员亟待解决的问题。
技术实现思路
本专利技术实施例的目的是提供一种视频拼接的方法与装置，可以满足视频拼接对实时处理速度的要求。为解决上述技术问题，本专利技术实施例提供一种视频拼接的方法，包括：S10：判断待处理视频帧是否为特定视本文档来自技高网...

【技术保护点】
一种视频拼接的方法，其特征在于，包括：S10：判断待处理视频帧是否为特定视频帧；若是，则执行S11；S11：将所述待处理视频帧和所述待处理视频帧对应的相邻视频帧之间的图像重叠区域作为ROI视频图像；其中，所述待处理视频帧和所述相邻视频帧由相邻的两台摄像机采集；S12：对所述ROI视频图像进行显著性区域检测，获得所述ROI视频图像对应的显著性区域；S13：利用SURF算法对所述显著性区域进行特征点检测，获取到所述显著性区域的特征点；S14：利用最近邻与次近邻比算法对所述特征点进行粗匹配；S15：利用RANSAC算法对粗匹配后的特征点进行提纯，计算出所述特征点对应的投影变换矩阵；S16：利用所述投...

【技术特征摘要】
1.一种视频拼接的方法，其特征在于，包括：S10：判断待处理视频帧是否为特定视频帧；若是，则执行S11；S11：将所述待处理视频帧和所述待处理视频帧对应的相邻视频帧之间的图像重叠区域作为ROI视频图像；其中，所述待处理视频帧和所述相邻视频帧由相邻的两台摄像机采集；S12：对所述ROI视频图像进行显著性区域检测，获得所述ROI视频图像对应的显著性区域；S13：利用SURF算法对所述显著性区域进行特征点检测，获取到所述显著性区域的特征点；S14：利用最近邻与次近邻比算法对所述特征点进行粗匹配；S15：利用RANSAC算法对粗匹配后的特征点进行提纯，计算出所述特征点对应的投影变换矩阵；S16：利用所述投影变换矩阵对所述待处理视频帧以及所述相邻视频帧进行融合、拼接，得到目标视频帧。2.根据权利要求1所述的方法，其特征在于，在所述S10中包括：判断待处理视频帧是否为首帧；若是，则执行所述S11；若否，则判断所述待处理视频帧是否为关键帧；若所述待处理视频帧为所述关键帧，则执行所述S11。3.根据权利要求2所述的方法，其特征在于，在所述判断所述待处理视频帧是否为关键帧之前还包括：计算各路视频对应的间隔帧数；每隔所述间隔帧数选取一帧图像作为关键帧。4.根据权利要求3所述的方法，其特征在于，所述计算各路视频对应的间隔帧数包括：计算第一路视频中的第一视频帧分别与所述第一视频帧相邻的前三个视频帧之间的相关系数；所述第一路视频为各路视频中的任意一路视频；计算所述相关系数的平均值根据公式确定出所述第一路视频的间隔帧数；其中，fps表示采集所述视频帧的帧率，所述间隔帧数取ΔN的整数部分。5.根据权利要求4所述的方法，其特征在于，在所述S12中包括：计算所述ROI视频图像的对数谱L(I)；根据公式A(I)＝L(I)×h(I)，计算出所述ROI视频图像的平均谱A(I)，其中，利用公式R(I)＝L(I)-A(I)，计算出所述ROI视频图像的频域残差R(I)；根据公式S(I)＝iFFT[exp(R(I)+P(I))]2，计算出所述ROI视频图像的空间域残差S(I)，其中，P(I)表示相位角；依据所述空间域残差S(I)，对所述ROI视频图像进行二值化处理，获得所述ROI视频图像对应的显著性区域，所述显著性区域的公式如下所示，

【专利技术属性】
技术研发人员：蔡延光，刘尚武，蔡颢，戚远航，
申请(专利权)人：广东工业大学，
类型：发明
国别省市：广东,44