视频生成方法及相关装置制造方法及图纸

技术编号:39128843 阅读:20 留言:0更新日期:2023-10-23 14:49
本申请提供了一种视频生成方法及相关装置,首先,确定目标对象的图像数据集;然后,确定所述图像数据集中每张图像的描述文本;接着,根据所述图像数据集以及所述每张图像的描述文本对预设第一模型进行训练以得到目标第一模型;接着,根据所述目标第一模型调整所述预设第二模型以得到目标第二模型;接着,通过所述目标第二模型生成第一图像;接着,通过所述目标第二模型对所述第一图像进行第一处理,得到第二图像;最后,根据所述第一图像和所述第二图像生成目标视频,所述目标视频用于展示所述第一图像变化至所述第二图像的变化过程。可以自动生成目标对象的流畅视频,大大提升了基于人工智能生成的视频的质量。基于人工智能生成的视频的质量。基于人工智能生成的视频的质量。

【技术实现步骤摘要】
视频生成方法及相关装置


[0001]本申请涉及计算机
,特别是一种视频生成方法及相关装置。

技术介绍

[0002]随着技术的发展,基于人工智能的视频生成方法层出不穷,但是目前的人工智能在生成视频时由于前后帧背景变化往往会出现帧间不连续的问题,生成的视频质量不佳。

技术实现思路

[0003]有鉴于此,本申请提供了一种视频生成方法及相关装置,可以针对单一目标对象自动生成流畅的视频,大大提升了基于人工智能生成的视频的质量。
[0004]第一方面,本申请实施例提供了一种视频生成方法,所述方法包括:
[0005]确定目标对象的图像数据集;
[0006]确定所述图像数据集中每张图像的描述文本;
[0007]根据所述图像数据集以及所述每张图像的描述文本对预设第一模型进行训练以得到目标第一模型;
[0008]根据所述目标第一模型调整所述预设第二模型以得到目标第二模型;
[0009]通过所述目标第二模型生成第一图像,所述第一图像为目标风格的反映所述目标对象的图像;
[0010]通过所述本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频生成方法,其特征在于,所述方法包括:确定目标对象的图像数据集;确定所述图像数据集中每张图像的描述文本;根据所述图像数据集以及所述每张图像的描述文本对预设第一模型进行训练以得到目标第一模型;根据所述目标第一模型调整所述预设第二模型以得到目标第二模型;通过所述目标第二模型生成第一图像,所述第一图像为目标风格的反映所述目标对象的图像;通过所述目标第二模型对所述第一图像进行第一处理,得到第二图像,所述第一处理用于调整所述第一图像中所述目标对象;根据所述第一图像和所述第二图像生成目标视频,所述目标视频用于展示所述第一图像变化至所述第二图像的变化过程。2.根据权利要求1所述的方法,其特征在于,所述确定目标对象的图像数据集,包括:筛选出至少预设数量的清晰度高于预设清晰度阈值、包括一个目标对象、任意角度的图像集合;将所述图像集合中背景复杂度高于预设复杂度阈值的图像做背景删除处理得到第一图像集合,以及,将所述背景复杂度低于或等于所述预设复杂度阈值的图像确定为第二图像集合;将所述第一图像集合和所述第二图像集合确定为所述图像数据集。3.根据权利要求1所述的方法,其特征在于,所述预设第一模型包括预设降维矩阵和预设升维矩阵,所述目标第一模型包括目标降维矩阵和目标升维矩阵;所述根据所述图像数据集以及所述每张图像的描述文本对预设第一模型进行训练以得到目标第一模型,包括:根据所述图像数据集以及所述每张图像的描述文本更新所述预设降维矩阵和所述预设升维矩阵,得到所述目标降维矩阵和所述目标升维矩阵组成的所述目标第一模型。4.根据权利要求3所述的方法,其特征在于,所述根据所述目标第一模型调整所述预设第二模型以得到目标第二模型,包括:根据所述目标降维矩阵和所述目标升维矩阵对所述预设第二模型的第一模块进行调整,得到所述目标第二模型,所述预设第二模型用于输出所述目标风格的图像,所述目标第二模型用于输出所述目标对象的所述目标风格的图像。5.根据权利要求1所述的方法,其特征在于,所述通过所述目标第二模型对所述第一图像进行第一处理,得到第二图像,所述第一处理用于调整所述第一图像中所述目标对象,包括:确定所述第一图像的待调整区域并设置图像掩膜;将所述图像掩膜、意图提示信息以及所述第一图像输入所述目标第二模型,...

【专利技术属性】
技术研发人员:王凡祎苏婧文
申请(专利权)人:OPPO广东移动通信有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1