一种视频图像的拼接方法、装置、终端设备及存储介质制造方法及图纸

本发明专利技术公开了一种视频图像的拼接方法、装置、终端设备及存储介质，方法包括：从待处理视频中提取两个相邻的视频图像帧，并对视频图像帧进行降噪处理，得到两个特定视频图像帧；采用边缘检测法检测特定视频图像帧，确定视频图像帧的匹配区域；查找并提取待匹配图像各自的特征点；采用光流法对特征点进行筛选，根据筛选出的特征点对的空间变换关系，对前后两帧待匹配图像进行空间变换；标定图像的重合区域，并根据重合区域进行图像拼接，得到目标视频图像。本发明专利技术能够仅依靠图像本身，运用视频图像识别技术发现并定位河道，运用视频图像融合技术进行图像的融合拼接，以实现对视频图像中非水域区域的图像进行精确、快速且高效地自动拼接融合。

A Mosaic Method, Device, Terminal Equipment and Storage Medium for Video Image

The invention discloses a video image mosaic method, device, terminal device and storage medium. The method includes: extracting two adjacent video image frames from the video to be processed, denoising the video image frames and obtaining two specific video image frames; detecting the specific video image frames by edge detection method to determine the matching area of the video image frames; and searching and lifting the matching area of the video image frames. The feature points of each image to be matched are selected; the feature points are filtered by optical flow method. According to the spatial transformation relationship of the selected feature point pairs, the two images to be matched are transformed in space; the overlap area of the image is calibrated, and the target video image is obtained by image mosaic according to the overlap area. The invention can only rely on the image itself, use video image recognition technology to find and locate rivers, and use video image fusion technology to fuse and stitch images, so as to achieve accurate, fast and efficient automatic stitching and fusion of images in non-water areas of video images.

【技术实现步骤摘要】
一种视频图像的拼接方法、装置、终端设备及存储介质
本专利技术涉及视频图像处理
，尤其涉及一种视频图像的拼接方法、装置、终端设备及存储介质。
技术介绍
目前常用的视频图像拼接方法主要有基于区域的图像拼接方法和基于特征的图像拼接方法。基于区域的图像拼接方法又可分为基于空间像素匹配的拼接算法和基于频域的拼接算法；基于特征的拼接方法主要根据采取采集特征的不同进行区分，比如早期的轮廓特征以及后来出现的SIFT特征、SURF特征、ORB特征等。基于区域的图像拼接方法中，基于像素匹配的拼接算法，主要通过两幅图像像素间的灰度关系来确定图像间的变化参数。早期的匹配方法是通过在相邻重叠部分进行平移，然后比较两幅图像的匹配度，需要测试所有的平移情况。这种方法运算量极大，而且不能解决旋转和尺度变换问题。还有采用基于金字塔结构的多分辨率匹配进行最优匹配搜索，可以在一定程度上解决尺度变换问题，但是对于旋转问题解决的不理想。基于频域的拼接方法，是通过对两幅图像做二维离散傅里叶变换，通过频域内的相关关系反变换得到空间域的相关关系。基于特征的图像拼接方法中，不是利用图像的全部信息，而是首先在图像中提取特征，通过本文档来自技高网...

【技术保护点】
1.一种视频图像的拼接方法，适于在计算设备中执行，其特征在于，包括：从待处理视频中提取两个相邻的视频图像帧，并对所述视频图像帧进行降噪处理，得到两个特定视频图像帧；采用边缘检测法检测所述特定视频图像帧，确定所述视频图像帧的匹配区域，并将所述匹配区域的图像作为待匹配图像；对所述前后两帧待匹配图像分别进行特征点查找，提取各自的特征点；采用光流法对所述特征点进行筛选，以得到满足图像拼接融合条件的特征点对；从所述的特征点对筛选出三个特征点对组合，根据所述三个特征点对组合中的特征点对的空间变换关系，对所述前后两帧待匹配图像进行空间变换；对经过空间变换后的前后两帧待匹配图像的重合区域进行标定，并根据所述重...

【技术特征摘要】
1.一种视频图像的拼接方法，适于在计算设备中执行，其特征在于，包括：从待处理视频中提取两个相邻的视频图像帧，并对所述视频图像帧进行降噪处理，得到两个特定视频图像帧；采用边缘检测法检测所述特定视频图像帧，确定所述视频图像帧的匹配区域，并将所述匹配区域的图像作为待匹配图像；对所述前后两帧待匹配图像分别进行特征点查找，提取各自的特征点；采用光流法对所述特征点进行筛选，以得到满足图像拼接融合条件的特征点对；从所述的特征点对筛选出三个特征点对组合，根据所述三个特征点对组合中的特征点对的空间变换关系，对所述前后两帧待匹配图像进行空间变换；对经过空间变换后的前后两帧待匹配图像的重合区域进行标定，并根据所述重合区域进行图像拼接，得到目标视频图像。2.根据权利要求1所述的视频图像的拼接方法，其特征在于，所述从待处理视频中提取两个相邻的视频图像帧，并对所述视频帧进行降噪处理，得到两个特定视频帧，具体为：分别计算待处理视频中每一个视频图像帧的锐度和色彩平滑度，并根据所述锐度和所述色彩平滑度提取满足视频图像的拼接条件的两个相邻的视频图像帧；根据所述视频图像帧的图像清晰度动态选择特定的滤波器进行滤波，并作二值化处理，得到两个特定视频图像帧；其中，所述特定的滤波器包括高斯滤波器、中值滤波器和双边滤波器。3.根据权利要求1所述的视频图像的拼接方法，其特征在于，所述采用边缘检测法检测所述特定视频图像帧，确定所述视频图像帧的匹配区域，并将所述匹配区域的图像作为待匹配图像，具体为：采用边缘检测法查找所述特定视频图像帧的所有可能边缘，并根据所有可能边缘确定所述特定视频图像帧的连通域；根据所述连通域确定匹配区域的边缘，并进一步根据所述匹配区域的边缘，对所述匹配区域进行优化处理；将优化后的匹配区域的图像作为待匹配图像。4.根据权利要求1所述的视频图像的拼接方法，其特征在于，所述对前后两帧待匹配图像分别进行特征点查找，提取各自的特征点，具体为：采用ORB算法、AKAZE算法和BRISK算法，对前后两帧待匹配的图像特征点进行查找，并提取各自的ORB特征点、AKAZE特征点和BRISK特征点。5.根据权利要求1所述的视频图像的拼接方法，其特征在于，所述采用光流法对所述特征点进行筛选，以得到满足图像拼接融合条件的特征点对，具体为：采用光流法提取前一帧待匹配图像的特征点对应的后一帧待匹配图像的特征点；计算前一帧待匹配图像的特征点与对应的后一帧待匹配图像的特征点之间的距离；判断所述距离是否等于或小于预设阈值，若是，则筛选得到满足图像拼接融合条件的特征点对。6.根据权利要求1所述的视频图像的拼接方法，其...

【专利技术属性】
技术研发人员：沈伟，梁羽剑，
申请(专利权)人：广州市鑫广飞信息科技有限公司，
类型：发明
国别省市：广东,44