一种视频图像的拼接方法、装置、终端设备及存储介质制造方法及图纸

本发明专利技术公开了一种视频图像的拼接方法、装置、终端设备及存储介质，所述方法包括：从待处理视频中提取两个相邻的视频图像帧，并降噪处理，得到两个特定视频图像帧；采用边缘检测法检测特定视频图像帧，确定视频图像帧的匹配区域，并将匹配区域的图像作为待匹配图像并提取特征点；根据特征点的空间变换关系，对前后两帧待匹配图像进行空间变换并且进行特征点匹配，并根据匹配结果标定前后两帧待匹配图像的重合区域；根据重合区域，进行图像拼接融合，得到目标视频图像。本发明专利技术能够仅依靠图像本身，运用视频图像识别技术与视频图像视角变换技术发现并定位河道，以实现对视频图像中水域区域的图像进行实时、快速且稳定地自动拼接融合。

A Mosaic Method, Device, Terminal Equipment and Storage Medium for Video Image

The invention discloses a video image mosaic method, device, terminal device and storage medium. The method includes: extracting two adjacent video image frames from the video to be processed, and denoising processing to obtain two specific video image frames; using edge detection method to detect a specific video image frame, determining the matching area of the video image frame, and making the image of the matching area as the image of the matching area. In order to match the image and extract the feature points, according to the spatial transformation relationship of the feature points, the two frames of the image to be matched are transformed and matched, and the overlap area of the two frames to be matched is calibrated according to the matching results. According to the overlap area, the image mosaic fusion is carried out to obtain the target video image. The invention can discover and locate river channels by using video image recognition technology and video image perspective transformation technology only depending on the image itself, so as to realize real-time, fast and stable automatic mosaic and fusion of water area images in video images.

【技术实现步骤摘要】
一种视频图像的拼接方法、装置、终端设备及存储介质
本专利技术涉及视频图像处理
，尤其涉及一种视频图像的拼接方法、装置、终端设备及存储介质。
技术介绍
目前常用的视频图像拼接方法主要有基于区域的图像拼接方法和基于特征的图像拼接方法。基于区域的图像拼接方法又可分为基于空间像素匹配的拼接算法和基于频域的拼接算法；基于特征的拼接方法主要根据采取采集特征的不同进行区分，比如早期的轮廓特征以及后来出现的SIFT特征、SURF特征、ORB特征等。基于区域的图像拼接方法中，基于像素匹配的拼接算法，主要通过两幅图像像素间的灰度关系来确定图像间的变化参数。早期的匹配方法是通过在相邻重叠部分进行平移，然后比较两幅图像的匹配度，需要测试所有的平移情况。这种方法运算量极大，而且不能解决旋转和尺度变换问题。还有采用基于金字塔结构的多分辨率匹配进行最优匹配搜索，可以在一定程度上解决尺度变换问题，但是对于旋转问题解决的不理想。基于频域的拼接方法，是通过对两幅图像做二维离散傅里叶变换，通过频域内的相关关系反变换得到空间域的相关关系。基于特征的图像拼接方法中，不是利用图像的全部信息，而是首先在图像中提取特征，通过本文档来自技高网...

【技术保护点】
1.一种视频图像的拼接方法，适于在计算设备中执行，其特征在于，包括：从待处理视频中提取两个相邻的视频图像帧，并对所述视频图像帧进行降噪处理，得到两个特定视频图像帧；采用边缘检测法检测所述特定视频图像帧，确定所述视频图像帧的匹配区域，并将所述匹配区域的图像作为待匹配图像；对所述前后两帧待匹配图像分别进行特征点检测，提取各自的特征点；根据所述特征点的空间变换关系，对所述前后两帧待匹配图像进行空间变换；将经过空间变换变换后的所述前后两帧待匹配图像进行特征点匹配，并根据匹配结果标定所述前后两帧待匹配图像的重合区域；根据所述重合区域，对所述前后两帧待匹配图像进行拼接融合，得到目标视频图像。

【技术特征摘要】
1.一种视频图像的拼接方法，适于在计算设备中执行，其特征在于，包括：从待处理视频中提取两个相邻的视频图像帧，并对所述视频图像帧进行降噪处理，得到两个特定视频图像帧；采用边缘检测法检测所述特定视频图像帧，确定所述视频图像帧的匹配区域，并将所述匹配区域的图像作为待匹配图像；对所述前后两帧待匹配图像分别进行特征点检测，提取各自的特征点；根据所述特征点的空间变换关系，对所述前后两帧待匹配图像进行空间变换；将经过空间变换变换后的所述前后两帧待匹配图像进行特征点匹配，并根据匹配结果标定所述前后两帧待匹配图像的重合区域；根据所述重合区域，对所述前后两帧待匹配图像进行拼接融合，得到目标视频图像。2.根据权利要求1所述的视频图像的拼接方法，其特征在于，所述从待处理视频中提取两个相邻的视频图像帧，并对所述视频帧进行降噪处理，得到两个特定视频帧，具体为：分别计算待处理视频中每一个视频图像帧的锐度和色彩平滑度，并根据所述锐度和所述色彩平滑度提取满足视频图像的拼接条件的两个相邻的视频图像帧；根据所述视频图像帧的图像清晰度动态选择特定的滤波器进行滤波，并作二值化处理，得到两个特定视频图像帧；其中，所述特定的滤波器包括高斯滤波器、中值滤波器和双边滤波器。3.根据权利要求1所述的视频图像的拼接方法，其特征在于，所述采用边缘检测法检测所述特定视频图像帧，确定所述视频图像帧的匹配区域，并将所述匹配区域的图像作为待匹配图像，具体为：采用边缘检测法查找所述特定视频图像帧的所有可能边缘，并根据所有可能边缘确定所述特定视频图像帧的连通域；根据所述连通域确定匹配区域的边缘，并进一步根据所述匹配区域的边缘，对所述匹配区域进行优化处理；将优化后的匹配区域的图像作为待匹配图像。4.根据权利要求1所述的视频图像的拼接方法，其特征在于，所述对前后两帧待匹配图像分别进行特征点检测，提取各自的特征点，具体为：利用SIFT算法和SURF算法对前后两帧待匹配图像进行特征点检测，提取各自的SIFT特征点和SURF特征点。5.根据权利要求1所述的视频图像的拼接方法，其特征在于，所述空间变换关系包括仿射变换关系、缩放变换关系、平移变换关系和旋转变换关系；所述根据所述特征点的空间变换关系，对所述前后两帧待匹配图像进行空间变换，具体为：根据无人机的不同拍摄视角下的匹配区域的形变程度信息，将前后两帧待匹配图像进行仿射变换，即将前后两帧待匹配图像统一到正投影匹...

【专利技术属性】
技术研发人员：沈伟，梁羽剑，
申请(专利权)人：广州市鑫广飞信息科技有限公司，
类型：发明
国别省市：广东,44