【技术实现步骤摘要】
本公开涉及数字人领域,尤其涉及一种控制方法、装置、电子设备及存储介质。
技术介绍
1、为了提高虚拟形象语音播报和面部动画的协调度,相关技术中通过语音作为驱动源来驱动虚拟形象的面部动作。但是,相关技术驱动虚拟形象说话时的面部的方法对聋哑人不够友好,导致聋哑人的体验感较差。
技术实现思路
1、本公开提供了一种控制方法、装置、电子设备及存储介质。
2、根据本公开的第一方面,提供了一种控制方法,所述方法包括:获取目标用户的肢体动作,并获取目标用户对应的目标虚拟形象;将所述肢体动作转换为语言信息;所述语言信息包括情感信息和文本信息;基于所述情感信息确定所述语言信息对应的面部表情,并基于所述面部表情和所述文本信息确定所述语言信息对应的面部动作;驱动所述目标虚拟形象执行所述面部动作,并基于所述文本信息和所述情感信息进行语音播报。
3、根据本公开的第二方面,提供了一种控制装置,装置包括:获取模块,用于获取目标用户的肢体动作,并获取所述目标用户对应的目标虚拟形象;转换模块,用于将所述
...【技术保护点】
1.一种控制方法,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述基于所述文本信息和所述情感信息进行语音播报,包括:
3.根据权利要求2所述的方法,其特征在于,所述文本信息包括音素序列;所述方法还包括:
4.根据权利要求3所述的方法,其特征在于,所述基于所述第一发音时长调整所述模板发音动作,并基于所述音素序列对调整后的发音动作进行连接,得到所述面部动作,包括:
5.根据权利要求3所述的方法,其特征在于,所述方法还包括:
6.根据权利要求1-5任一所述的方法,其特征在于,所述方法还包括
7....
【技术特征摘要】
1.一种控制方法,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述基于所述文本信息和所述情感信息进行语音播报,包括:
3.根据权利要求2所述的方法,其特征在于,所述文本信息包括音素序列;所述方法还包括:
4.根据权利要求3所述的方法,其特征在于,所述基于所述第一发音时长调整所述模板发音动作,并基于所述音素序列对调整后的发音动作进行连接,得到所述面部动作,包括:
5.根据权利要求3所述的方法,其特征在于,所述方法还包括...
【专利技术属性】
技术研发人员:李宏龙,
申请(专利权)人:咪咕文化科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。