有声视频的生成系统、方法、存储介质及计算机程序产品技术方案

技术编号:41857027 阅读:11 留言:0更新日期:2024-06-27 18:31
本公开提供了一种有声视频的生成系统,包括:处理器;存储器;以及计算机程序,其中计算机程序存储在存储器上,当计算机程序被处理器执行时,使得视频的生成系统执行以下过程:基于原始视频的原始影像和目标语音,获得影像光流集,其中影像光流集用于指示原始影像中各个像素点的移位量;根据影像光流集和原始影像中发音主体的面部特征信息,生成目标影像;将目标影像和原始影像进行融合,形成目标有声视频。本公开还提供一种有声视频的生成方法、存储介质及计算机程序产品。

【技术实现步骤摘要】

本公开涉及视频处理领域,特别涉及一种有声视频的生成系统、方法、存储介质及计算机程序产品


技术介绍

1、有声视频是一种结合视觉元素和听觉元素的多媒体内容,通过同时呈现图像和声音来传达信息和情感。有声视频在当今数字化时代扮演着重要的角色,被广泛应用于广告营销、电影制作、教育培训和社交媒体传播等领域。尤其是,有声视频通过将声音和图像结合,能够更加生动、真实和全面的传达信息,激发观众的情感共鸣。但是,为了进一步满足观众的观看体验,可能会存在对视频中的声音部分进行替换需求。例如,某演讲者的原始演讲视频为英文版本,而观众更期望看到中文版本的演讲视频,那么就会存对音频部分进行语言转换的需求。

2、但是,若原始视频的图像主体为人物,如果直接将新音频和视频简单的结合,那么人物嘴型与声音之间会出现错位的问题,会极大地降低所生成的新视频的真实度,那么也就无法发挥有声视频给观众带来情感共鸣的优势。


技术实现思路

1、为了解决前述问题的至少之一,本公开提供了一种有声视频的生成系统、方法、存储介质及计算机程序产品。

本文档来自技高网...

【技术保护点】

1.一种有声视频的生成系统,其特征在于,包括:处理器;存储器;以及计算机程序,其中所述计算机程序存储在所述存储器上,当所述计算机程序被所述处理器执行时,使得所述有声视频的生成系统执行以下过程:

2.根据权利要求1所述的有声视频的生成系统,其特征在于,所述处理器,在基于原始视频的原始影像和目标语音,获得影像光流集时,用于:

3.根据权利要求2所述的有声视频的生成系统,其特征在于,所述处理器,在基于所述目标位置数据和所述原始位置数据,确定所述原始影像中任一原始图片帧的影像光流时,用于:

4.根据权利要求1所述的有声视频的生成系统,其特征在于,所述处理器,在...

【技术特征摘要】

1.一种有声视频的生成系统,其特征在于,包括:处理器;存储器;以及计算机程序,其中所述计算机程序存储在所述存储器上,当所述计算机程序被所述处理器执行时,使得所述有声视频的生成系统执行以下过程:

2.根据权利要求1所述的有声视频的生成系统,其特征在于,所述处理器,在基于原始视频的原始影像和目标语音,获得影像光流集时,用于:

3.根据权利要求2所述的有声视频的生成系统,其特征在于,所述处理器,在基于所述目标位置数据和所述原始位置数据,确定所述原始影像中任一原始图片帧的影像光流时,用于:

4.根据权利要求1所述的有声视频的生成系统,其特征在于,所述处理器,在根据所述影像光流集和所述原始影像中发音主体的面部特征信息,生成目标影像时,用于:

5.根据权利要求4所述的有声视频的生成系统,其特征在于,所述处理器,在按照所述影像光...

【专利技术属性】
技术研发人员:孙瑜博侯学东唐旻杰吕达
申请(专利权)人:出门问问苏州信息科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1