特效视频的生成方法、装置、设备及存储介质制造方法及图纸

本公开实施例公开了一种特效视频的生成方法、装置、设备及存储介质。采集一张或者多张人物形象图像，并获取特效信息序列；将所述一张人物形象图像和所述特效信息序列输入第一特效生成模型，或者将所述多张人物形象图像和所述特效信息序列输入第一特效生成模型，获得多张特效图像；将所述多张特效图像按照所述设定顺序进行拼接，获得目标特效视频。本公开实施例提供的特效视频的生成方法，将所述一张人物形象图像和所述特效信息序列输入第一特效生成模型，或者将所述多张人物形象图像和所述特效信息序列输入第一特效生成模型，获得特效图像，从而获得目标特效视频，可以提高图像的趣味性及用户体验。趣味性及用户体验。趣味性及用户体验。

【技术实现步骤摘要】
特效视频的生成方法、装置、设备及存储介质


[0001]本公开实施例涉及图像处理
，尤其涉及一种特效视频的生成方法、装置、设备及存储介质。

技术介绍

[0002]几年，短视频APP迅速发展，走进了用户的生活，逐渐丰富了用户的业余生活。用户可以采用视频、照片等方式记录生活，并可以通过短视频APP上提供的特效技术，进行再加工，以更丰富的形式进行表达，比如美颜、风格化、表情编辑等。

技术实现思路

[0003]本公开实施例提供一种特效视频的生成方法、装置、设备及存储介质，可以提高视频的趣味性及用户体验。
[0004]第一方面，本公开实施例提供了一种特效视频的生成方法，包括：
[0005]采集一张或者多张人物形象图像，并获取特效信息序列；其中，所述特效信息序列中的特效信息按照设定顺序排列；
[0006]将所述一张人物形象图像和所述特效信息序列输入第一特效生成模型，或者将所述多张人物形象图像和所述特效信息序列输入第一特效生成模型，获得多张特效图像；
[0007]将所述多张特效图像按照所述设定顺序进行拼接，本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种特效视频的生成方法，其特征在于，包括：采集一张或者多张人物形象图像，并获取特效信息序列；其中，所述特效信息序列中的特效信息按照设定顺序排列；将所述一张人物形象图像和所述特效信息序列输入第一特效生成模型，或者将所述多张人物形象图像和所述特效信息序列输入第一特效生成模型，获得多张特效图像；将所述多张特效图像按照所述设定顺序进行拼接，获得目标特效视频。2.根据权利要求1所述的方法，其特征在于，将所述多张人物形象图像和所述特效信息序列输入第一特效生成模型，获得多张特效图像，包括：将所述多张人物形象图像与所述特效信息序列组成多个特效数据对；其中，所述特效数据对由一张人物形象图像和一个特效信息构成；将所述多个特效数据对依次输入第一特效生成模型，获得多张特效图像。3.根据权利要求1所述的方法，其特征在于，所述第一特效生成模型的训练方式为：获取人物形象样本数据；将所述人物形象样本数据及关键点差异信息输入第二特效生成模型，获得第一特效数据；对所述第一特效数据进行编码，获得所述第一特效数据对应的特效信息；将所述人物形象样本数据和所述特效信息输入所述第一特效生成模型，获得第二特效数据；基于所述第一特效数据和所述第二特效数据的损失函数对所述第一特效生成模型进行训练。4.根据权利要求3所述的方法，其特征在于，获取人物形象样本数据，包括：采集真实人物形象，获得人物形象样本数据；或者，对虚拟人物形象进行渲染，获得人物形象样本数据；或者，将随机噪声输入人物形象生成模型，获得人物形象样本数据。5.根据权利要求3所述的方法，其特征在于，所述第二特效生成模型的训练方式为：获取虚拟人物特效视频数据和真实人物特效视频数据；分别从所述虚拟人物特效视频数据和真实人物特效视频数据提取两张视频帧，组成虚拟视频帧对和真实视频帧对；基于所述虚拟视频帧对所述第二特效生成模型进行训练；基于所述真实视频帧对对训练后的第二特效生成模型进行修正。6.根据权利要求5所述的方法，其特征在于，所述虚拟视频帧对包括前向虚拟视频帧和后向虚拟视频帧；基于所述虚拟视频帧对所述第二特效生成模型进行训练，包括：分别提取所述前向虚拟视频帧和后向虚拟视频帧的关键点信息，...

【专利技术属性】
技术研发人员：徐盼盼，
申请(专利权)人：北京字节跳动网络技术有限公司，
类型：发明
国别省市：