System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本说明书一个或多个实施例涉及电子设备领域,尤其涉及一种基于虚拟形象的语音交互方法及智能终端。
技术介绍
1、当前的智能终端大多支持与用户进行对话,但大多仅能通过语音的形式透出,形态相对单一,使用户的交互体验不高。
2、为了提高用户体验,相关技术引入了虚拟形象,建立三维虚拟人嘴部模型,获取语音信息中每个音素对应的口型模型,建立口型模型序列,从而可以驱动虚拟形象的嘴部动画。由于仅考虑了嘴部动作,使整个虚拟形象不够自然,无法给用户带来自然流畅的对话体验。
技术实现思路
1、有鉴于此,本说明书一个或多个实施例提供一种基于虚拟形象的语音交互方法及智能终端,以解决相关技术中存在的问题。
2、为实现上述目的,本说明书一个或多个实施例提供技术方案如下:
3、根据本说明书一个或多个实施例的第一方面,提出了一种基于虚拟形象的语音交互方法,包括:
4、获取所述智能终端待输出的与用户输入的用户语音对应的反馈语音;
5、获取所述反馈语音对应的语音特征,并基于所述语音特征预测与所述反馈语音同步的面部特征信息;
6、基于所述面部特征信息对虚拟形象进行可视化渲染,并输出可视化渲染后的所述虚拟形象,以使所述虚拟形象在播报所述反馈语音的过程中同步呈现与所述面部特征信息对应的面部表情。
7、可选的,所述语音特征包括与所述反馈语音对应的文本特征和声学特征;
8、所述基于所述语音特征预测与所述反馈语音同步的面部特征信息,包括:<
...【技术保护点】
1.一种基于虚拟形象的语音交互方法,其特征在于,应用于智能终端,包括:
2.根据权利要求1所述的方法,其特征在于,所述语音特征包括与所述反馈语音对应的文本特征和声学特征;
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
4.根据权利要求3所述的方法,其特征在于,所述根据所述语义分析的分析结果,确定与所述反馈语音同步的肢体动作模板和表情模板;包括:
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
6.根据权利要求1所述的方法,其特征在于,所述虚拟形象为2D真人虚拟形象,所述面部特征信息为landmark特征信息;或者,所述虚拟形象为2D卡通虚拟形象或3D虚拟形象,所述面部特征信息为blendshape特征信息。
7.根据权利要求1所述的方法,其特征在于,所述智能终端包括交互屏幕;
8.一种智能终端,其特征在于,所述智能终端包括交互屏幕,包括:
9.一种电子设备,其特征在于,包括:
10.一种计算机可读存储介质,其特征在于,其上存储有计算机指令,该指令被
...【技术特征摘要】
1.一种基于虚拟形象的语音交互方法,其特征在于,应用于智能终端,包括:
2.根据权利要求1所述的方法,其特征在于,所述语音特征包括与所述反馈语音对应的文本特征和声学特征;
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
4.根据权利要求3所述的方法,其特征在于,所述根据所述语义分析的分析结果,确定与所述反馈语音同步的肢体动作模板和表情模板;包括:
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
6.根据权利要求1所述的方法,其特征在于,所...
【专利技术属性】
技术研发人员:吴佳伦,郏友涛,盖于涛,姜飞俊,
申请(专利权)人:浙江艾克斯精灵人工智能科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。