【技术实现步骤摘要】
视频处理方法、装置、电子设备及介质
本公开涉及图像处理领域,特别是涉及一种视频处理方法、装置、电子设备及介质。
技术介绍
在当前的影视娱乐业中,由于一些原因,需要在作品拍摄完成后对某些演员进行替换。聘请其他演员重新录制相关镜头将消耗大量时间成本与物资成本。视频是一个帧序列的集合,通常用每秒帧的数量(即FPS)衡量。按照常用的每秒24帧来估计,每10秒钟的视频片段就有240帧图像,人工处理的工作量极大,且需要图形图像的专业人士进行操作,对专业能力和熟练程度要求较高,否则处理效果无法得到保证。随着人工智能深度学习技术的不断发展,将人工智能技术用于视频中人脸自动替换成为可能。
技术实现思路
(一)要解决的技术问题针对于上述技术问题,本公开提出一种视频处理方法、装置、电子设备及介质,用于至少解决上述技术问题。(二)技术方案根据本公开实施例的第一方面,提供一种视频处理方法,方法包括:分别将待替换视频与目标视频解码成第一帧序列及第二帧序列,获取各自分别对应的待替换对象图像及目标对象图像;对待替 ...
【技术保护点】
1.一种视频处理方法,其特征在于,方法包括:/n分别将待替换视频与目标视频解码成第一帧序列及第二帧序列,获取各自分别对应的待替换对象图像及目标对象图像;/n对所述待替换对象图像进行编码,编码过程中加入预选噪声;/n对编码结果进行风格迁移;/n对风格迁移的编码结果进行解码重建,使得所述目标对象图像替换所述待替换对象图像,得到重建图像;/n将所述重建图像融合到所述第一帧序列,得到替换后的第一帧序列,将所述替换后的第一帧序列恢复为视频。/n
【技术特征摘要】
1.一种视频处理方法,其特征在于,方法包括:
分别将待替换视频与目标视频解码成第一帧序列及第二帧序列,获取各自分别对应的待替换对象图像及目标对象图像;
对所述待替换对象图像进行编码,编码过程中加入预选噪声;
对编码结果进行风格迁移;
对风格迁移的编码结果进行解码重建,使得所述目标对象图像替换所述待替换对象图像,得到重建图像;
将所述重建图像融合到所述第一帧序列,得到替换后的第一帧序列,将所述替换后的第一帧序列恢复为视频。
2.根据权利要求1所述的方法,其特征在于,所述对所述待替换对象图像进行编码,包括:
获取第一降噪自编码器;
将所述待替换对象图像输入所述第一降噪自编码器进行编码。
3.根据权利要求1所述的方法,其特征在于,所述对风格迁移的编码结果进行解码重建,包括:
获取第二降噪自编码器;
将所述风格迁移的编码结果输入所述第二降噪自编码器进行解码重建。
4.根据权利要求2或3所述的方法,其特征在于,所述方法还包括:训练所述第一降噪自编码器或所述第二降噪自编码器,该操作包括:
获取第一训练数据集及第二训练数据集,所述第一训练数据集包括用于训练的待替换视频,所述第二训练数据集包括用于训练的目标视频;
提取所述用于训练的待替换视频中的第一图像数据,提取所述用于训练的目标视频的第二图像数据;
采用层次训练方法,利用所述第一图像数据训练所述第一降噪自编码器,利用所述第二图像数据训练所述第二降噪自编码器。
5.根据权利要求4所述的方法,其特征在于,所述采用层次训练方法,利用所述第一图像数据训练所述第一降噪自编码器,包括:
采用双层卷积对所述第一图像...
【专利技术属性】
技术研发人员:张勇东,胡梓珩,谢洪涛,邓旭冉,李岩,
申请(专利权)人:中国科学技术大学,北京中科研究院,
类型:发明
国别省市:安徽;34
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。