一种视频图像编辑方法、装置、电子设备及可读存储介质制造方法及图纸

技术编号:24096072 阅读:45 留言:0更新日期:2020-05-09 10:25
本发明专利技术实施例提出的一种视频图像编辑方法、装置、电子设备及可读存储介质,获取视频中的待编辑对象的图像作为待编辑图像,将待编辑图像输入到训练后的预设通用编码器中进行编码处理得到与待编辑图像对应的特征,根据用户选取的目标对象,确定与目标对象对应的目标解码器,将待编辑图像的特征输入到目标解码器中即可得到包含目标对象的特征的图像,以此作为编辑后的图像。应用本方案针对一个目标对象和N个待编辑对象进行图像编辑时,仅需一个通用编码器和一个与目标对象对应的解码器即可,而现有技术则需要N组编码器和解码器才可以,所以本方案与现有技术相比,需要的编码器和解码器数量少,需要训练的编码器和解码器也就少了,所以训练次数少。

A video image editing method, device, electronic equipment and readable storage medium

【技术实现步骤摘要】
一种视频图像编辑方法、装置、电子设备及可读存储介质
本专利技术实施例涉及图像处理
,具体涉及一种视频图像编辑方法、装置、电子设备及可读存储介质。
技术介绍
目前视频的换脸技术可以更改视频中人物的年龄、性别、发色、妆容等,也支持将一个人的脸换成另外一个人的脸。现在换脸技术广泛的是通过基于CNN(convolutionalneuralnetwork,卷积神经网络)的编码器和解码器来实现,例如在将人脸A换成人脸B时,先获取大量人脸A和人脸B的数据,利用获取的数据对编码器与解码器进行训练,得到一组专门用于将人脸A转换成人脸B的编码器和解码器,这样将人脸A输入到编码器进行编码然后输入到解码器进行解码即可替换成人脸B,但是通过这种方法,在进行人脸替换时每次都要单独训练出一组与此次人脸替换对应的编码器和解码器,工作量太大,耗时太长。
技术实现思路
为了解决上述技术问题或者至少部分地解决上述技术问题,本专利技术实施例提供了一种视频图像编辑方法、装置、电子设备及可读存储介质。有鉴于此,第一方面,本专利技术实施例提供一种视本文档来自技高网...

【技术保护点】
1.一种视频图像编辑方法,其特征在于,包括:/n获取待编辑图像,所述待编辑图像为视频中的待编辑对象的图像;/n将所述待编辑图像输入训练后的预设通用编码器,得到与所述待编辑图像对应的特征;/n根据预设的对象与解码器的对应关系,确定与用户选取的目标对象对应的目标解码器;/n将所述待编辑图像对应的特征输入所述目标解码器,生成包含所述目标对象的特征的图像,作为编辑后的图像。/n

【技术特征摘要】
1.一种视频图像编辑方法,其特征在于,包括:
获取待编辑图像,所述待编辑图像为视频中的待编辑对象的图像;
将所述待编辑图像输入训练后的预设通用编码器,得到与所述待编辑图像对应的特征;
根据预设的对象与解码器的对应关系,确定与用户选取的目标对象对应的目标解码器;
将所述待编辑图像对应的特征输入所述目标解码器,生成包含所述目标对象的特征的图像,作为编辑后的图像。


2.根据权利要求1所述的方法,其特征在于,所述预设通用编码器的训练包括:
获取多个对象的图像以及每个图像的真实特征作为样本;
将每个图像分别输入预设通用编码器,得到输出特征;
根据输出特征和该图像对应的真实特征,采用预设的训练方法对所述预设通用编码器进行训练,得到训练后的预设通用编码器。


3.根据权利要求1所述的方法,其特征在于,所述解码器通过下述方式设置:
获取多个对象的图像作为样本;
选取所述样本中的任一对象作为目标对象;
选取所述目标对象对应的任一图像作为目标图像;
将所述样本中的各个图像分别输入所述训练后的预设通用编码器得到所述样本中各个图像分别对应的特征;
将所述样本中各图像对应的特征分别输入预设的与所述目标对象对应的初始解码器,得到输出图像;
根据所述输出图像和所述目标图像采用预设的训练方法,对所述初始解码器进行训练,得到与所述目标对象对应的解码器。


4.根据权利要求1所述的方法,其特征在于,获取待编辑图像,包括:
获取待编辑对象选取操作;
根据所述待编辑对象选取操作确定所述视频中的待编辑对象;
从预设的图像库中或从所述视频的帧图像中获取所述待编辑对象的图像作为待编辑图像。


5.根据权利要求4所述的方法,其特征在于,若从预设的图像库中获取所述待编辑对象的图像作为待编辑图像,则所述方法还包括:
确定所述视频的帧图像中包含有待编辑对象的图像的帧图像作为目标帧图像;
将所述目标帧图像中包含的待编辑对象的图像替换成所述编辑后的图像,得到编辑后的帧图像。


6.根据权利要求1所述的方法,其特征在于,所述解码器分为特征替换类解码器和特征添加类解码器;
将所述待编辑图像对应的特征输入所述目标解码器,得到包含所述目标对象的特征的图像,包括:
若所述目标解码器为特征替换类解码器,利用所述目标解码器自身包含的目标对象的特征对所述待编辑图像对应的特征进行自适应替换,生成包含所述目标对应的特征的图像;
若所述目标解码器为特征添加类解码器,将所述目标解码器自身包含的目标对象的特征添加到所述待编辑图像对应的特征中,生成包含所述目标对象的特征的图像。


7.一种视频图像编辑装置,其特征在于,包括:
获取模块,用于获取待编辑图像,所述待编辑图像为视频中的待编辑对象的图像;
编码模块,用于将所述待编辑图像输入训练后的预设通用编码器,得到与所述待编辑图像对应的特征;
解码器确定模块,用于根据预设的...

【专利技术属性】
技术研发人员:柳政冯巍
申请(专利权)人:北京奇艺世纪科技有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1