图像处理方法、图像处理装置及存储介质制造方法及图纸

本公开是关于一种图像处理方法、图像处理装置及存储介质。其中，所述图像处理方法包括：获取待处理媒体影像，待处理媒体影像中显示有至少部分被遮挡的目标场景对象；确定待处理媒体影像中，遮挡目标场景对象的目标遮挡对象；在待处理媒体影像中目标遮挡对象对应的第一区域，对目标场景对象进行填补处理，生成目标媒体影像。通过本公开的图像处理方法，可以保证用户获得去除遮挡目标场景对象的目标遮挡对象并接近真实目标场景对象的媒体影像，提升了用户在使用过程中的体验感和满意度。了用户在使用过程中的体验感和满意度。了用户在使用过程中的体验感和满意度。

【技术实现步骤摘要】
图像处理方法、图像处理装置及存储介质


[0001]本公开涉及图像处理
，尤其涉及图像处理方法、图像处理装置及存储介质。

技术介绍

[0002]随着终端技术的发展，各种具备图像拍摄功能的终端也越来越普及，例如，相机、智能手机、平板电脑、智能穿戴设备等。具备图像拍摄功能终端的普及为人们随时随地拍摄照片提供了便利，使拍照成为人们日常生活的一部分，尤其在旅游或者途经某些名胜古迹时，每个人都想拍张照片留作纪念。
[0003]然而，在景区进行照片拍摄时，由于景区的游客较多，尤其是在旅游季节，经常会出现拍摄的照片中将形形色色的各种其他不相关的游客也拍摄在照片中。即对于用户在景区拍摄照片或已经拍摄完成的照片，在视场内拍摄到照片中包括有主体遮挡对象(例如欲拍摄的人物)，并且在照片视场中还包括有除主体遮挡对象以外的其他遮挡对象(他人或物体)。用户想要拍一张没有他人或物体干扰的独自与名胜风景相处的照片，已经是目前一个痛点。

技术实现思路

[0004]为克服相关技术中存在的问题，本公开提供一种图像处理方法、图像处理装置及存储介质。
[0005]根据本公开实施例的第一方面，提供一种图像处理方法，所述图像处理方法包括获取待处理媒体影像，待处理媒体影像中显示有至少部分被遮挡的目标场景对象；确定待处理媒体影像中，遮挡目标场景对象的目标遮挡对象；在待处理媒体影像中目标遮挡对象对应的第一区域，对目标场景对象进行填补处理，生成目标媒体影像。
[0006]在一种实施方式中，在待处理媒体影像中目标遮挡对象对应的第一区域，对目标场景对象进行填补处理，生成目标媒体影像之前，图像处理方法还包括：对待处理媒体影像中目标遮挡对象对应的第一区域进行去除处理。
[0007]在另一种实施方式中，图像处理方法还包括：从云端数据库中获取与目标场景对象匹配的场景图像；在待处理媒体影像中目标遮挡对象对应的第一区域，对目标场景对象进行填补处理，生成目标媒体影像，包括：对场景图像与目标场景对象进行图像配准，在场景图像中确定与第一区域对应的第二区域；融合第二区域以及待处理媒体影像，以得到目标媒体影像。
[0008]其中，一种实施方式中，融合第二区域以及待处理媒体影像可以是将第二区域的图像融合至待处理媒体影像的第一区域处，得到目标媒体影像。另一种实施方式中，融合第二区域以及待处理媒体影像可以是将第二区域的图像融合至待处理媒体影像中去除第一区域的相应区域处，得到目标媒体影像。
[0009]在又一种实施方式中，图像处理方法还包括：获取待处理媒体影像的拍摄参数，拍
摄参数包括拍摄光照信息、拍摄时间信息、拍摄位置信息、拍摄方位信息、拍摄角度信息、拍摄季节信息和拍摄天气信息中的一项或多项；从云端数据库中获取与目标场景对象匹配的场景图像，包括：基于拍摄参数，在云端数据库的场景图像集中确定匹配拍摄参数的场景图像子集；在场景图像子集中，获取匹配目标场景对象的场景图像。
[0010]在又一种实施方式中，在场景图像子集中，获取匹配目标场景对象的场景图像，包括：将待处理媒体影像中除目标场景对象以外的其他场景对象的特征匹配权重置零，并在场景图像子集中，确定与目标场景对象的特征匹配权重最高的场景图像，作为匹配目标场景对象的场景图像。
[0011]在又一种实施方式中，在待处理媒体影像中目标遮挡对象对应的第一区域，对目标场景对象进行填补处理，生成目标媒体影像，包括：基于预先训练的神经网络模型，对待处理媒体影像中目标遮挡对象对应的第一区域进行修复处理，生成目标媒体影像。
[0012]在又一种实施方式中，确定待处理媒体影像中，遮挡目标场景对象的目标遮挡对象，包括：对待处理媒体影像中遮挡目标场景对象的遮挡对象进行像素分割，得到遮挡对象的二维掩膜图像，其中，二维掩膜图像中每一遮挡对象所在区域具有各自的类标；基于类标，确定二维掩膜图像中的主体遮挡对象所在区域；将二维掩膜图像中除主体遮挡对象所在区域之外的其他遮挡对象，确定为目标遮挡对象。
[0013]在又一种实施方式中，基于类标，确定二维掩膜图像中的主体遮挡对象所在区域，包括：基于卷积神经网络在全部类标中检测符合主体遮挡对象的类标对应的像素区域，作为主体遮挡对象所在区域；或者将用户选择的类标对应的像素区域，作为主体遮挡对象所在区域。
[0014]根据本公开实施例的第二方面，提供一种图像处理装置，所述图像处理装置包括：获取模块，用于获取待处理媒体影像，待处理媒体影像中显示有至少部分被遮挡的目标场景对象；目标遮挡对象确定模块，用于确定待处理媒体影像中，遮挡目标场景对象的目标遮挡对象；图像处理模块，用于在待处理媒体影像中目标遮挡对象对应的第一区域，对目标场景对象进行填补处理，生成目标媒体影像。
[0015]在一种实施方式中，图像处理装置还包括第一区域去除模块，第一区域去除模块用于：对待处理媒体影像中目标遮挡对象对应的第一区域进行去除处理。
[0016]在另一种实施方式中，图像处理装置还包括场景图像匹配模块，场景图像匹配模块用于：从云端数据库中获取与目标场景对象匹配的场景图像；图像处理模块用于：对场景图像与目标场景对象进行图像配准，在场景图像中确定与第一区域对应的第二区域；融合第二区域以及待处理媒体影像，以得到目标媒体影像。
[0017]在又一种实施方式中，图像处理装置还包括拍摄参数获取模块，拍摄参数获取模块用于：获取待处理媒体影像的拍摄参数，拍摄参数包括拍摄光照信息、拍摄时间信息、拍摄位置信息、拍摄方位信息、拍摄角度信息、拍摄季节信息和拍摄天气信息中的一项或多项；场景图像匹配模块用于：基于拍摄参数，在云端数据库的场景图像集中确定匹配拍摄参数的场景图像子集；在场景图像子集中，获取匹配目标场景对象的场景图像。
[0018]在又一种实施方式中，场景图像匹配模块用于：将待处理媒体影像中除目标场景对象以外的其他场景对象的特征匹配权重置零，并在场景图像子集中，确定与目标场景对象的特征匹配权重最高的场景图像，作为匹配目标场景对象的场景图像。
[0019]在又一种实施方式中，图像处理模块用于：基于预先训练的神经网络模型，对待处理媒体影像中目标遮挡对象对应的第一区域进行修复处理，生成目标媒体影像。
[0020]在又一种实施方式中，目标遮挡对象确定模块用于：对待处理媒体影像中遮挡目标场景对象的遮挡对象进行像素分割，得到遮挡对象的二维掩膜图像，其中，二维掩膜图像中每一遮挡对象所在区域具有各自的类标；基于类标，确定二维掩膜图像中的主体遮挡对象所在区域；将二维掩膜图像中除主体遮挡对象所在区域之外的其他遮挡对象，确定为目标遮挡对象。
[0021]在又一种实施方式中，目标遮挡对象确定模块用于：基于卷积神经网络在全部类标中检测符合主体遮挡对象的类标对应的像素区域，作为主体遮挡对象所在区域；或者将用户选择的类标对应的像素区域，作为主体遮挡对象所在区域。
[0022]根据本公开实施例的第三方面，提供一种图像处理装置，所述图像处理装置包括：处理器；用于存储处理器可执行指令的存本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法，其特征在于，所述图像处理方法包括：获取待处理媒体影像，所述待处理媒体影像中显示有至少部分被遮挡的目标场景对象；确定所述待处理媒体影像中，遮挡所述目标场景对象的目标遮挡对象；在所述待处理媒体影像中所述目标遮挡对象对应的第一区域，对所述目标场景对象进行填补处理，生成目标媒体影像。2.根据权利要求1所述的图像处理方法，其特征在于，所述在所述待处理媒体影像中所述目标遮挡对象对应的第一区域，对所述目标场景对象进行填补处理，生成目标媒体影像之前，所述方法还包括：对所述待处理媒体影像中所述目标遮挡对象对应的第一区域进行去除处理。3.根据权利要求1或2所述的图像处理方法，其特征在于，所述图像处理方法还包括：从云端数据库中获取与所述目标场景对象匹配的场景图像；所述在所述待处理媒体影像中所述目标遮挡对象对应的第一区域，对所述目标场景对象进行填补处理，生成目标媒体影像，包括：对所述场景图像与所述目标场景对象进行图像配准，在所述场景图像中确定与所述第一区域对应的第二区域；融合所述第二区域以及所述待处理媒体影像，以得到目标媒体影像。4.根据权利要求3所述的图像处理方法，其特征在于，所述图像处理方法还包括：获取所述待处理媒体影像的拍摄参数，所述拍摄参数包括拍摄光照信息、拍摄时间信息、拍摄位置信息、拍摄方位信息、拍摄角度信息、拍摄季节信息和拍摄天气信息中的一项或多项；从云端数据库中获取与所述目标场景对象匹配的场景图像，包括：基于所述拍摄参数，在所述云端数据库的场景图像集中确定匹配所述拍摄参数的场景图像子集；在所述场景图像子集中，获取匹配所述目标场景对象的场景图像。5.根据权利要求4所述的图像处理方法，其特征在于；在所述场景图像子集中，获取匹配所述目标场景对象的场景图像，包括：将所述待处理媒体影像中除所述目标场景对象以外的其他场景对象的特征匹配权重置零，并在所述场景图像子集中，确定与所述目标场景对象的特征匹配权重最高的场景图像，作为匹配所述目标场景对象的场景图像。6.根据权利要求1所述的图像处理方法，其特征在于，所述在所述待处理媒体影像中所述目标遮挡对象对应的第一区域，对所述目标场景对象进行填补处理，生成目标媒体影像，包括：基于预先训练的神经网络模型，对所述待处理媒体影像中所述目标遮挡对象对应的第一区域进行修复处理，生成目标媒体影像。7.根据权利要求1所述的图像处理方法，其特征在于，所述确定所述待处理媒体影像中，遮挡所述目标场景对象的目标遮挡对象，包括：对所述待处理媒体影像中遮挡所述目标场景对象的遮挡对象进行像素分割，得到所述遮挡对象的二维掩膜图像，其中，所述二维掩膜图像中每一遮挡对象所在区域具有各自的
类标；基于所述类标，确定所述二维掩膜图像中的主体遮挡对象所在区域；将所述二维掩膜图像中除所述主体遮挡对象所在区域之外的其他遮挡对象，确定为所述目标遮挡对象。8.根据权利要求7所述的图像处理方法，其特征在于，所述基于所述类标，确定所述二维掩膜图像中的主体遮挡对象所在区域，包括：基于卷积神经网络在全部类标中检测符合主体遮挡对象的类标对应的像素区域，作为所述主体遮挡对象所在区域；或者将用户选择的类标对应的像素区域，作为所述主体遮挡对象所在区域。9.一种图像处理装置，其特征在于，所述图像处...

【专利技术属性】
技术研发人员：王晓涛，李雅楠，邵光琪，雷磊，
申请(专利权)人：北京小米移动软件有限公司，
类型：发明
国别省市：