一种视频生成和直播方法、介质、装置和计算设备制造方法及图纸

技术编号:41428226 阅读:26 留言:0更新日期:2024-05-28 20:26
本公开的实施方式提供了一种视频生成和直播方法、介质、装置和计算设备。所述视频生成方法,从预先构建的视频素材库中获取与待播报文本相匹配的第一视频,所述视频素材库中的多个动作视频是用户根据预设语义和预设动作预先录制的;将所述第一视频转换为所述用户对应的数字人的第二视频,并编辑所述第二视频中数字人的口型使所述口型符合所述待播报文本,之后结合所述待播报文本的音频生成目标视频。通过本公开可以从视频素材库中获取与任意待播报文本相匹配的动作视频,使得生成的目标视频中,数字人所做出的肢体动作符合播报的文本信息,从而解决数字人的肢体动作单一,以及肢体动作与播报文本语义不一致的问题。

【技术实现步骤摘要】

本公开的实施方式涉及计算机,更具体地,本公开的实施方式涉及一种视频生成和直播方法、介质、装置和计算设备


技术介绍

1、目前直播平台已经成为人们日常生活中不可或缺的一部分,人们可以利用这些平台来分享生活,售卖商品等。随着人工智能技术的不断发展,出现了数字人技术,该技术可以被用作虚拟主播、虚拟导游等多种应用场景。

2、由于数字人的肢体动作太少,容易重复而且数字人的肢体动作和口中表达的内容没有联系,导致通过数字人进行直播时经常出现太假的问题,影响用户在直播间的观感体验,因此亟需解决该问题。

3、本部分旨在为权利要求书中陈述的本公开的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。


技术实现思路

1、在本上下文中,本公开的实施方式期望提供一种视频生成和直播方法、介质、装置和计算设备,以便提高通过数字人直播的直播效果。

2、在本公开实施方式的第一方面中,提供了一种视频生成方法,包括:根据待播报文本,确定视频素材库的多个动作视频中匹配的第一视频,所述多个动作本文档来自技高网...

【技术保护点】

1.一种视频生成方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述动作视频包括第一动作视频和第二动作视频,所述第一动作视频是用户根据预设语义预先录制的,所述第二动作视频是用户根据预设动作预先录制的,所述第一动作视频具有标签,所述标签包括用于表征数字语义的第一标签、用于表征设定语义的第二标签和用于表征情绪语义的第三标签中的至少一种,不同标签具有不同的优先级;

3.根据权利要求2所述的方法,其特征在于,所述第二标签包括至少一个预设文本和/或设定关键词;

4.根据权利要求2所述的方法,其特征在于,所述视频素材库中还包括待机状态视频,所述...

【技术特征摘要】

1.一种视频生成方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述动作视频包括第一动作视频和第二动作视频,所述第一动作视频是用户根据预设语义预先录制的,所述第二动作视频是用户根据预设动作预先录制的,所述第一动作视频具有标签,所述标签包括用于表征数字语义的第一标签、用于表征设定语义的第二标签和用于表征情绪语义的第三标签中的至少一种,不同标签具有不同的优先级;

3.根据权利要求2所述的方法,其特征在于,所述第二标签包括至少一个预设文本和/或设定关键词;

4.根据权利要求2所述的方法,其特征在于,所述视频素材库中还包括待机状态视频,...

【专利技术属性】
技术研发人员:赵小虎马勇强赵琪王迪杨杰
申请(专利权)人:杭州网易再顾科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1