视频生成方法、装置、计算机设备和存储介质制造方法及图纸

技术编号:33778046 阅读:29 留言:0更新日期:2022-06-12 14:31
本申请涉及人工智能领域,通过根据人体姿态视频分别对人体图像中的第一部位与第二部位进行动作驱动,并对得到的第一动作视频与第二动作视频进行融合处理,实现利用单帧人体图像快速生成人物动作视频,操作便捷,提升了人体动作视频生成的效率。涉及一种视频生成方法、装置、计算机设备和存储介质,该方法包括:获取人体图像;根据人体姿态视频对人体图像中的第一部位进行动作驱动,获得人体图像对应的第一动作视频;根据人体姿态视频对人体图像中的第二部位进行动作驱动,获得人体图像对应的第二动作视频;对第一动作视频与第二动作视频进行融合,获得人体图像对应的目标人体动作视频。此外,本申请还涉及区块链技术,人体图像可存储于区块链中。存储于区块链中。存储于区块链中。

【技术实现步骤摘要】
视频生成方法、装置、计算机设备和存储介质


[0001]本申请涉及人工智能,尤其涉及一种视频生成方法、装置、计算机设备和存储介质。

技术介绍

[0002]随着短视频内容消费的快速增长,快速创建虚拟人视频已成为一个典型的需求。现有的虚拟人视频生成技术一般是基于3Dmax等三维模型生成。但是这种三维模型生成虚拟人视频,需要对每个用户的动作构建三维动画,操作繁琐、需要耗费大量的时间,并且构建的三维动画无法适配于其它用户的形象,降低了视频生成的效率。
[0003]因此,如何提高视频生成的效率成为亟需解决的问题。

技术实现思路

[0004]本申请提供了一种视频生成方法、装置、计算机设备和存储介质,通过根据人体姿态视频分别对人体图像中的第一部位与第二部位进行动作驱动,并对得到的第一动作视频与第二动作视频进行融合处理,实现利用单帧人体图像快速生成人物动作视频,提升了人体动作视频生成的效率。
[0005]第一方面,本申请提供了一种视频生成方法,所述方法包括:
[0006]获取待生成视频的人体图像;/>[0007]根据本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频生成方法,其特征在于,包括:获取待生成视频的人体图像;根据预设的人体姿态视频对所述人体图像中的第一部位进行动作驱动,获得所述人体图像对应的第一动作视频;根据所述人体姿态视频对所述人体图像中的第二部位进行动作驱动,获得所述人体图像对应的第二动作视频;对所述第一动作视频与所述第二动作视频进行融合,获得所述人体图像对应的目标人体动作视频。2.根据权利要求1所述的视频生成方法,其特征在于,所述第一部位包括头部;所述根据预设的人体姿态视频对所述人体图像中的第一部位进行动作驱动,获得所述人体图像对应的第一动作视频,包括:确定所述人体图像对应的头部区域图像,以及确定所述人体姿态视频对应的头部动作视频;将所述头部动作视频与所述头部区域图像输入动作驱动模型进行动作驱动,获得所述第一动作视频。3.根据权利要求2所述的视频生成方法,其特征在于,所述动作驱动模型包括关键点检测器、运动估计器以及图像生成器;所述将所述头部动作视频与所述头部区域图像输入动作驱动模型进行动作驱动,获得所述第一动作视频,包括:将所述头部动作视频与所述头部区域图像输入所述关键点检测器进行处理,获得所述头部区域图像对应的第一关键点信息、所述头部动作视频对应的第二关键点信息;确定所述第一关键点信息与所述第二关键点信息对应的仿射变换矩阵;将所述头部区域图像、所述第一关键点信息、所述第二关键点信息以及所述仿射变换矩阵输入所述运动估计器进行运动估计处理,获得对应的映射关系图以及遮挡图;将所述映射关系图、所述遮挡图以及所述头部区域图像输入所述图像生成器进行图像生成,获得所述第一动作视频。4.根据权利要求3所述的视频生成方法,其特征在于,所述确定所述第一关键点信息与所述第二关键点信息对应的仿射变换矩阵,包括:对所述第一关键点信息进行求导,获得所述第一关键点信息对应的第一导数,以及对所述第二关键点信息进行求导,获得所述第二关键点信息对应的第二导数;由所述第一导数与所述第二导数的比值,生成所述仿射变换矩阵。5.根据权利要求3所述的视频生成方法,其特征在于,所述图像生成器包括编码器与解码器;所述将所述映射关系图、所述遮挡图以及所述头部区域图像输入所述图像生成器进行图像生成,获得...

【专利技术属性】
技术研发人员:邹泽宇
申请(专利权)人:中国平安人寿保险股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1