一种数字人驱动方法、装置及系统制造方法及图纸

技术编号:41529927 阅读:21 留言:0更新日期:2024-06-03 23:05
本申请实施例提供了一种数字人驱动方法、装置及系统,涉及数据处理技术领域,上述方法包括:获得待播报的语音,并获得模板人物的模板图像;将所述语音和所述模板图像输入2D数字人生成器,得到所述模板人物播报所述语音的虚拟口播视频;播放所述虚拟口播视频,获得服务端发送的人物形态描述数据,其中,所述人物形态描述数据为:所述服务端对所述客户端播放的视频进行图像采集、并对采集到的图像中所述模板人物的形态进行分析得到的数据;将所述人物形态描述数据作为驱动数据,驱动预先生成的数字人。应用本申请实施例提供的方案能够简化数字人的驱动流程。

【技术实现步骤摘要】

本申请涉及数据处理,特别是涉及一种数字人驱动方法、装置及系统


技术介绍

1、数字人(digital human)是一种虚拟形象,一般包括五官、四肢等可驱动的部位,为上述各个部位设置控制参数,即可使得数字人呈现出各种各样的表情和动作,进而实现各种各样的功能。例如,通过设置控制参数,可以驱动数字人向用户播报客服语音,实现虚拟客服功能。其中,上述控制参数可以称为驱动数据。可见,驱动数据是使得数字人实现各项功能的关键。

2、相关技术中,一般采用专业的视频录制设备针对真人录制视频,然后基于录制得到的视频获得驱动数字人的驱动数据。然而,采用视频录制设备针对真人录制视频这一流程较为繁琐,造成驱动数据的获取流程较为复杂,获取难度较高,进而导致驱动数字人的流程较为复杂。


技术实现思路

1、本申请实施例的目的在于提供一种数字人驱动方法、装置及系统,以简化数字人的驱动流程。具体技术方案如下:

2、第一方面,本申请实施例提供了一种数字人驱动方法,应用于客户端,所述方法包括:

3、获得待播报的语音本文档来自技高网...

【技术保护点】

1.一种数字人驱动方法,其特征在于,应用于客户端,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述客户端对应运行有第一线程和第二线程,所述播放所述虚拟口播视频,获得服务端发送的人物形态描述数据,包括:

3.根据权利要求2所述的方法,其特征在于,所述将基于所接收图像分析数据确定的人物形态描述数据写入数据缓存区,包括:

4.根据权利要求3所述的方法,其特征在于,在所述第一线程播放所述虚拟口播视频之前,还包括:

5.根据权利要求4所述的方法,其特征在于,所述将所确定人物形态描述数据写入数据缓存区,包括:

<p>6.根据权利要求...

【技术特征摘要】

1.一种数字人驱动方法,其特征在于,应用于客户端,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述客户端对应运行有第一线程和第二线程,所述播放所述虚拟口播视频,获得服务端发送的人物形态描述数据,包括:

3.根据权利要求2所述的方法,其特征在于,所述将基于所接收图像分析数据确定的人物形态描述数据写入数据缓存区,包括:

4.根据权利要求3所述的方法,其特征在于,在所述第一线程播放所述虚拟口播视频之前,还包括:

5.根据权利要求4所述的方法,其特征在于,所述将所确定人物形态描述数据写入数据缓存区,包括:

6.根据权利要求5所述的方法,其特征在于,所述基于所接收图像分析数据的第一发送时间戳,判断所确定人物形态描述数据是否为所述第一线程最近播放的视频帧中所述模板人物的人物形态描述数据,包括:

7.根据权利要求4所述的方法,其特征在于,在所述将所述人物形态描述数据作为驱动数据,驱动预先生成的数字人之前,还包括:

8.根据权利要求7所述的方法,其特征在...

【专利技术属性】
技术研发人员:吴进仪
申请(专利权)人:杭州萤石软件有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1