一种天空图像处理方法和装置制造方法及图纸

本发明专利技术实施例提供了一种天空图像处理方法和装置。所述方法包括：在所述移动终端进行拍摄时，获取拍摄的视频流数据，所述视频流数据包括视频帧天空图像；提取所述视频帧天空图像的高频特征以及低频特征；融合所述高频特征以及所述低频特征，生成全局特征；对所述全局特征进行矩阵解码，生成掩膜数据；在所述视频帧天空图像上，结合所述掩膜数据以及所述天空替换图像数据，生成换天图像。通过本发明专利技术实施例通过快速逐帧重复分割每帧图像的天空部分并进行置换，从而达到实时换天的效果。从而达到实时换天的效果。从而达到实时换天的效果。

【技术实现步骤摘要】
一种天空图像处理方法和装置


[0001]本专利技术涉及图像处理
，特别是涉及一种天空图像处理方法，一种天空图像处理装置，一种电子设备和一种存储介质。

技术介绍

[0002]随着智能汽车的兴起，车载设备日益完善，相应的对于车辆各部分的智能化需求也随之上升。目前车载摄像头是智能汽车的标配，通过对摄像头捕捉到的图像进行自动后期处理也成为了用户对车辆采集的图像处理需求。但是由于车辆上的车载终端的硬件性能有限，用于如PC（personal computer，个人计算机）等终端上的处理方法并不适用与车辆上。

技术实现思路

[0003]鉴于上述问题，提出了本专利技术实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种天空图像处理方法，一种天空图像处理装置，一种电子设备和一种存储介质。
[0004]为了解决上述问题，本专利技术实施例公开了一种天空图像处理方法，应用于移动终端，所述移动终端上存储有天空替换图像数据，所述方法包括：在所述移动终端进行拍摄时，获取拍摄的视频流数据，所述视频流数据包括视频帧天空图像；提取所述视频帧天空图像的高频特征以及低频特征；融合所述高频特征以及所述低频特征，生成全局特征；对所述全局特征进行矩阵解码，生成掩膜数据；在所述视频帧天空图像上，结合所述掩膜数据以及所述天空替换图像数据，生成换天图像。
[0005]可选地，所述方法还包括：针对所述换天图像进行图像后期处理，生成效果图像。
[0006]可选地，所述提取所述视频帧天空图像的高频特征以及低频特征的步骤包括：将所述视频帧天空图像进行快速下采样处理；复制处理后的视频帧天空图像，生成第一天空图像和第二天空图像；对所述第一天空图像进行高频特征提取；对所述第二天空图像进行低频特征提取。
[0007]可选地，所述对所述第二天空图像进行低频特征提取的步骤包括：采用低频编码的方式，提取所述第二天空图像中的低频语义信息；确定所述低频语义信息为所述低频特征。
[0008]可选地，所述对所述第一天空图像进行高频特征提取的步骤包括：采用高频编码的方式，提取所述第一天空图像中的高频语义信息；
确定所述高频语义信息为所述高频特征。
[0009]可选地，所述融合所述高频特征以及所述低频特征，生成全局特征的步骤包括：通过预设矩阵在通道方向上合并所述高频特征以及所述低频特征，生成全局特征。
[0010]可选地，在所述对所述全局特征进行矩阵解码，生成掩膜数据的步骤之后，所述方法还包括：对所述掩膜数据进行引导滤波处理。
[0011]本专利技术实施例还公开了一种天空图像处理装置，应用于移动终端，所述移动终端上存储有天空替换图像数据，所述装置包括：获取模块，用于在所述移动终端进行拍摄时，获取拍摄的视频流数据，所述视频流数据包括视频帧天空图像；提取模块，用于提取所述视频帧天空图像的高频特征以及低频特征；融合模块，用于融合所述高频特征以及所述低频特征，生成全局特征；解码模块，用于对所述全局特征进行矩阵解码，生成掩膜数据；结合模块，用于在所述视频帧天空图像上，结合所述掩膜数据以及所述天空替换图像数据，生成换天图像。
[0012]本专利技术实施例还公开了一种电子设备，包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如上所述的天空图像处理方法的步骤。
[0013]本专利技术实施例还公开了一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如上所述的天空图像处理方法的步骤。
[0014]本专利技术实施例包括以下优点：本专利技术实施例通过在所述移动终端进行拍摄时，获取拍摄的视频流数据，所述视频流数据包括视频帧天空图像；提取所述视频帧天空图像的高频特征以及低频特征；融合所述高频特征以及所述低频特征，生成全局特征；对所述全局特征进行矩阵解码，生成掩膜数据；在所述视频帧天空图像上，结合所述掩膜数据以及所述天空替换图像数据，生成换天图像。本专利技术实施例通过获取拍摄到的视频帧天空图像，针对捕获图像中天空部分进行分割得到全局特征，并生成掩膜数据，将掩膜数据和天空替换图像数据结合在视频帧天空图像上生成换天图像，以实现实时对图像的天空部分置换为其他场景的效果，具有高精度，且参数量小、功耗低；适用于移动终端上。
附图说明
[0015]图1是本专利技术的一种天空图像处理方法实施例的步骤流程图；图2是本专利技术的另一种天空图像处理方法实施例的步骤流程图；图3是本专利技术的一种天空图像处理装置实施例的结构框图。
具体实施方式
[0016]为使本专利技术的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实
施方式对本专利技术作进一步详细的说明。
[0017]参照图1，示出了本专利技术的一种天空图像处理方法实施例的步骤流程图，应用于移动终端，所述移动终端上存储有天空替换图像数据。
[0018]需要说明的是，所述移动终端可以包括手持移动终端，如手机，平板电脑等，还可以包括机械承载移动的终端，如车载终端等。本专利技术实施例对此不作具体限定。
[0019]对于天空替换图像数据可以是与天空图像相关的素材数据，也可以与天空不同类型的素材数据，所述天空替换图像数据是用于替换视频帧天空图像中天空部分的图像。其可以存储在移动终端的内置存储空间的存储地址，也可以存储在移动终端的外置存储空间的存储地址，本专利技术实施例对此也不做限定。
[0020]所述方法具体可以包括如下步骤：步骤101，在所述移动终端进行拍摄时，获取拍摄的视频流数据，所述视频流数据包括视频帧天空图像；在实际应用中，移动终端上可以配置有至少一个摄像头，当启动其中一个摄像头进行拍摄时，可以获取摄像头针对实际场景进行拍摄的视频流数据，其中，所述视频流数据多帧视频帧天空图像。
[0021]步骤102，提取所述视频帧天空图像的高频特征以及低频特征；在获取到视频帧天空图像后，可以分别针对视频帧天空图像进行高频特征提取和低频特征提取，以提取出视频帧天空图像的高频特征以及低频特征。
[0022]步骤103，融合所述高频特征以及所述低频特征，生成全局特征；根据得到的高频特征以及低频特征，将相同位置的高频特征以及低频特征进行融合，生成矩阵数据，所述矩阵数据即为全局特征。
[0023]步骤104，对所述全局特征进行矩阵解码，生成掩膜数据；由于矩阵数据为计算机易读的数据，需要将全局特征进行矩阵解码还原为人所能看懂的自然语义信息，生成掩膜数据。
[0024]步骤105，在所述视频帧天空图像上，结合所述掩膜数据以及所述天空替换图像数据，生成换天图像。
[0025]将掩膜数据和待替换的天空替换图像数据，在视频帧天空图像上进行层层叠加的结合生成新的换天图像，以对视频帧天空图像中的天空部分进行替换。
[0026]本专利技术实施例通过在所述移动终端进行拍摄时，获取拍摄的视频流数据，所述视频流数据包括视频帧天空图像；提取所述视频帧天空图像的高频特征以及低频特征；融合所述本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种天空图像处理方法，其特征在于，应用于移动终端，所述移动终端上存储有天空替换图像数据，所述方法包括：在所述移动终端进行拍摄时，获取拍摄的视频流数据，所述视频流数据包括视频帧天空图像；提取所述视频帧天空图像的高频特征以及低频特征；融合所述高频特征以及所述低频特征，生成全局特征；对所述全局特征进行矩阵解码，生成掩膜数据；在所述视频帧天空图像上，结合所述掩膜数据以及所述天空替换图像数据，生成换天图像。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：针对所述换天图像进行图像后期处理，生成效果图像。3.根据权利要求1所述的方法，其特征在于，所述提取所述视频帧天空图像的高频特征以及低频特征的步骤包括：将所述视频帧天空图像进行快速下采样处理；复制处理后的视频帧天空图像，生成第一天空图像和第二天空图像；对所述第一天空图像进行高频特征提取；对所述第二天空图像进行低频特征提取。4.根据权利要求3所述的方法，其特征在于，所述对所述第二天空图像进行低频特征提取的步骤包括：采用低频编码的方式，提取所述第二天空图像中的低频语义信息；确定所述低频语义信息为所述低频特征。5.根据权利要求3所述的方法，其特征在于，所述对所述第一天空图像进行高频特征提取的步骤包括：采用高频编码的方式，提取所述第一天空图像中的高频语义信息；确定所述高频语义信息为所述高频特征。6.根据权利要求1...

【专利技术属性】
技术研发人员：李博贤，彭丽江，郑鹏程，陶颖，
申请(专利权)人：北京美摄网络科技有限公司，
类型：发明
国别省市：