视频生成方法和装置、存储介质及电子设备制造方法及图纸

技术编号:33637127 阅读:42 留言:0更新日期:2022-06-02 01:51
本发明专利技术公开了一种视频生成方法和装置、存储介质及电子设备。其中,该方法包括:获取待展示的音乐片段和将要根据音乐片段进行表演的虚拟形象的图片;提取音乐片段的内容特征以及风格特征,其中,内容特征用于指示音乐片段中每个音频帧的词曲特征,风格特征用于指示当前演绎音乐片段的表演对象在每个音频帧的表演风格特征;提取虚拟形象的身体标签信息;根据内容特征、风格特征以及身体标签信息生成虚拟形象演绎音乐片段的表演视频,其中,虚拟形象与表演对象的表演相似度大于目标阈值。本发明专利技术解决了现有方法中音乐表演视频的制作成本较高的技术问题。高的技术问题。高的技术问题。

【技术实现步骤摘要】
视频生成方法和装置、存储介质及电子设备


[0001]本专利技术涉及计算机领域,具体而言,涉及一种视频生成方法和装置、存储介质及电子设备。

技术介绍

[0002]如今用户在欣赏音乐的同时,通常也有欣赏与音乐相匹配的MV (Music Video,音乐短片)的需求。现有的生成与音乐相匹配的MV的方式通常是在制作音乐的同时拍摄与音乐相匹配的歌手演唱MV,然后将 MV与音乐同时发布在音乐平台上,从而使得用户可以欣赏与音乐相匹配的MV。
[0003]随着音乐市场的越来越多元化,越来越多的小众歌手开始在音乐平台上发布原创音乐,但是没有足够的经费拍摄MV,因而无法满足用户欣赏 MV的需求。也就是说,现有技术存在音乐视频制作成本较高的技术问题。
[0004]针对上述的问题,目前尚未提出有效的解决方案。

技术实现思路

[0005]本专利技术实施例提供了一种视频生成方法和装置、存储介质及电子设备,以至少解决现有方法中音乐表演视频的制作成本较高的技术问题。
[0006]根据本申请实施例的一个方面,提供了一种视频生成方法,包括:本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种表演视频的生成方法,其特征在于,包括:获取待展示的音乐片段和将要根据所述音乐片段进行表演的虚拟形象的图片;提取所述音乐片段的内容特征以及风格特征,其中,所述内容特征用于指示所述音乐片段中每个音频帧的词曲特征,所述风格特征用于指示当前演绎所述音乐片段的表演对象在每个音频帧的表演风格特征;提取所述虚拟形象的身体标签信息,其中,所述身体标签信息用于指示所述虚拟形象的多个身体关键点各自的位置坐标;根据所述内容特征、所述风格特征以及所述身体标签信息生成所述虚拟形象演绎所述音乐片段的表演视频,其中,所述虚拟形象与所述表演对象的表演相似度大于目标阈值。2.根据权利要求1所述的方法,其特征在于,根据所述内容特征、所述风格特征以及所述身体标签信息生成所述虚拟形象演绎所述音乐片段的表演视频包括:将所述内容特征输入表演视频生成网络中的时间递归子网络,得到时序结果,其中,所述时间递归子网络用于获取所述内容特征中的时序关系;基于所述时序结果与所述虚拟形象的所述身体标签信息,得到内容偏移量,其中,所述内容偏移量用于指示所述虚拟形象上的身体关键点根据所述音频帧的词曲特征确定出的位置偏移变化量;基于所述时序结果和所述风格特征与所述虚拟形象的所述身体标签信息,得到风格偏移量,其中,所述风格偏移量用于指示所述虚拟形象上的身体关键点根据所述表演对象的表演风格特征确定出的位置偏移变化量;根据所述内容偏移量和所述风格偏移量与所述虚拟形象的所述身体标签信息,生成所述表演视频。3.根据权利要求2所述的方法,其特征在于,根据所述内容偏移量和所述风格偏移量与所述虚拟形象的所述身体标签信息,生成所述表演视频包括:根据所述内容偏移量和所述风格偏移量,调整所述虚拟形象的图片中所述身体标签信息所指示的所述虚拟形象的所述多个身体关键点各自的位置坐标,得到表演视频帧;对所述表演视频帧进行缩放调整,以生成所述表演视频。4.根据权利要求2所述的方法,其特征在于,提取所述虚拟形象的身体标签信息包括以下至少之一:提取所述虚拟形象的面部关键点的位置坐标;提取所述虚拟形象的身体关节关键点的位置坐标。5.根据权利要求1所述的方法,其特征在于,获取待展示的音乐片段和将要根据所述音乐片段进行表演的虚拟形象的图片之前,还包括:获取多个样本表演视频,其中,所述样本表演视频中包括样本音乐以及与所述样本音乐对应的表演对象所演绎的表演视频;提取所述样本音乐的...

【专利技术属性】
技术研发人员:黄志鹏蔡海军金绍港
申请(专利权)人:广州繁星互娱信息科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1