交互的反馈方法和装置、存储介质及电子装置制造方法及图纸

技术编号:34554665 阅读:13 留言:0更新日期:2022-08-17 12:40
本发明专利技术公开了一种交互的反馈方法和装置、存储介质及电子装置,涉及智慧家庭技术领域,该方法包括:获取目标对象的交互意图,并确定处理交互意图的技能服务;目标对象为对话交互的对象,技能服务用于对交互意图进行响应;在技能服务收到交互意图的情况下,获取技能服务根据交互意图确定的反馈信息;根据反馈信息确定动作分类,从虚拟对象的预置动作集合中确定出与动作分类匹配的目标动作;以及读取反馈信息携带的目标内容,基于目标内容确定虚拟对象的目标唇形动作;将目标动作与目标唇形动作进行融合,得到用于反馈目标对象的交互意图,且显示在智能设备上的融合动画,解决了无法根据目标对象的交互意图确定出相应的动画等问题。目标对象的交互意图确定出相应的动画等问题。目标对象的交互意图确定出相应的动画等问题。

【技术实现步骤摘要】
交互的反馈方法和装置、存储介质及电子装置


[0001]本专利技术涉及智慧家庭领域,具体而言,涉及一种交互的反馈方法和装置、存储介质及电子装置。

技术介绍

[0002]传统虚拟人交互,是根据用户交互信息,生成相应的动作参数,然后传递给终端展示出对应的表情和肢体动作。但是,上述方式通过参数驱动的虚拟人,在应对一些会实时变化的语料,或复杂的动作时,无法呈现良好的展示效果,只能下发固定的动作,使得用户与虚拟对象的交互过于死板,并且确定出的虚拟对象的动作种类过于单一。
[0003]针对相关技术中,无法根据目标对象的交互意图确定出相应的动画等问题,尚未提出有效的技术方案。

技术实现思路

[0004]本专利技术实施例提供了一种交互的反馈方法和装置、存储介质及电子装置,以至少解决相关技术中,无法根据目标对象的交互意图确定出相应的动画等问题。
[0005]根据本专利技术的一个实施例,提供了一种交互的反馈方法,包括:获取目标对象的交互意图,并确定处理交互意图的技能服务;其中,目标对象为对话交互的对象,技能服务用于对交互意图进行响应;在技能服务收到交互意图的情况下,获取技能服务根据交互意图确定的反馈信息;根据反馈信息确定动作分类,从虚拟对象的预置动作集合中确定出与所述动作分类匹配的目标动作;以及读取所述反馈信息携带的目标内容,基于所述目标内容确定所述虚拟对象的目标唇形动作;将目标动作与目标唇形动作进行融合,得到用于反馈目标对象的交互意图,且显示在智能设备上的融合动画。
[0006]在一个示例性实施例中,获取目标对象的交互意图,包括:采集目标对象与智能设备进行对话交互的实时交互信息,其中,实时交互信息包括以下至少之一:目标对象发出的语音信息、目标对象输入的文本信息;对实时交互信息进行语义解析,根据语义解析的结果确定目标对象的交互意图。
[0007]在一个示例性实施例中,在技能服务收到交互意图的情况下,获取技能服务根据交互意图确定的反馈信息,包括:在交互意图中存在多个语料的情况下,对交互意图进行语料筛选,以确定出用于在技能服务进行查询的查询语料;在查询语料添加上目标对象的标识信息,得到目标查询语料;将目标查询语料传输至技能服务中进行查询,以确定出与目标查询语料对应的反馈信息,其中,反馈信息包含以下至少之一:技能服务反馈的文本信息、技能服务反馈的语音信息。
[0008]在一个示例性实施例中,读取所述反馈信息携带的目标内容,基于所述目标内容确定所述虚拟对象的目标唇形动作,包括:读取所述反馈信息中携带的目标内容;生成与所述目标内容对应的口型数据,获取所述口型数据中的唇形特征;汇总所述唇形特征确定出所述反馈信息对应的所述虚拟对象的目标唇形动作。
[0009]在一个示例性实施例中,将目标动作与目标唇形动作进行融合,得到用于反馈目标对象的交互意图,且显示在智能设备上的融合动画,包括:将目标动作与目标唇形动作输入到虚拟对象模型中,以得到用于反馈目标对象交互意图的融合动画,其中,虚拟对象模型为使用多组数据通过机器学习训练出的,多组数据中的每组数据均包括:目标动作,以及目标动作对应的目标唇形动作。
[0010]在一个示例性实施例中,将目标动作与目标唇形动作进行融合,得到用于反馈目标对象的交互意图,且显示在智能设备上的融合动画之后,上述方法还包括:获取目标对象对智能设备上显示的融合动画的评价信息;其中,评价信息为目标对象与融合动画完成交互后反馈的满意度;根据评价信息确定智能设备是否对交互意图进行了成功响应。
[0011]在一个示例性实施例中,根据评价信息确定智能设备是否对交互意图进行了成功响应,包括:在评价信息对应的满意度大于或者等于预设阈值的情况下,确定目标对象的交互意图已经被成功响应,结束对目标对象当前交互意图的处理;在评价信息对应的满意度小于预设阈值的情况下,确定目标对象的交互意图未被成功响应,在智能设备上显示询问信息,其中,显示询问信息用于提示目标对象对交互意图进行补充。
[0012]根据本专利技术的另一个实施例,提供了一种交互的反馈方法装置,包括:第一获取模块,用于获取目标对象的交互意图,并确定处理交互意图的技能服务;其中,目标对象为对话交互的对象,技能服务用于对交互意图进行响应;第二获取模块,用于在技能服务收到交互意图的情况下,获取技能服务根据交互意图确定的反馈信息;动作模块,用于根据反馈信息确定动作分类,从虚拟对象的预置动作集合中确定出与所述动作分类匹配的目标动作;以及读取所述反馈信息携带的目标内容,基于所述目标内容确定所述虚拟对象的目标唇形动作;融合模块,用于将目标动作与目标唇形动作进行融合,得到用于反馈目标对象的交互意图,且显示在智能设备上的融合动画。
[0013]在一个示例性实施例中,上述第一获取模块,还用于采集所述目标对象与所述智能设备进行对话交互的实时交互信息,其中,所述实时交互信息包括以下至少之一:目标对象发出的语音信息、目标对象输入的文本信息;对所述实时交互信息进行语义解析,根据所述语义解析的结果确定所述目标对象的交互意图。
[0014]在一个示例性实施例中,上述第二获取模块,还用于在交互意图中存在多个语料的情况下,对交互意图进行语料筛选,以确定出用于在技能服务进行查询的查询语料;在查询语料添加上目标对象的标识信息,得到目标查询语料;将目标查询语料传输至技能服务中进行查询,以确定出与目标查询语料对应的反馈信息,其中,反馈信息包含以下至少之一:技能服务反馈的文本信息、技能服务反馈的语音信息。
[0015]在一个示例性实施例中,上述动作模块,还用于读取所述反馈信息中携带的目标内容;生成与所述目标内容对应的口型数据,获取所述口型数据中的唇形特征;汇总所述唇形特征确定出所述反馈信息对应的所述虚拟对象的目标唇形动作。
[0016]在一个示例性实施例中,上述融合模块,还用于将目标动作与目标唇形动作输入到虚拟对象模型中,以得到用于反馈目标对象交互意图的融合动画,其中,虚拟对象模型为使用多组数据通过机器学习训练出的,多组数据中的每组数据均包括:目标动作,以及目标动作对应的目标唇形动作。
[0017]在一个示例性实施例中,上述装置还包括:评价模块,用于获取目标对象对智能设
备上显示的融合动画的评价信息;其中,评价信息为目标对象与融合动画完成交互后反馈的满意度;根据评价信息确定智能设备是否对交互意图进行了成功响应。
[0018]在一个示例性实施例中,上述评价模块,还用于在评价信息对应的满意度大于或者等于预设阈值的情况下,确定目标对象的交互意图已经被成功响应,结束对目标对象当前交互意图的处理;在评价信息对应的满意度小于预设阈值的情况下,确定目标对象的交互意图未被成功响应,在智能设备上显示询问信息,其中,显示询问信息用于提示目标对象对交互意图进行补充。
[0019]根据本专利技术的又一个实施例,还提供了一种存储介质,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
[0020]根据本专利技术的又一个实施例本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种交互的反馈方法,其特征在于,包括:获取目标对象的交互意图,并确定处理所述交互意图的技能服务;其中,所述目标对象为对话交互的对象,所述技能服务用于对所述交互意图进行响应;在所述技能服务收到所述交互意图的情况下,获取所述技能服务根据所述交互意图确定的反馈信息;根据反馈信息确定动作分类,从虚拟对象的预置动作集合中确定出与所述动作分类匹配的目标动作;以及读取所述反馈信息携带的目标内容,基于所述目标内容确定所述虚拟对象的目标唇形动作;将所述目标动作与所述目标唇形动作进行融合,得到用于反馈所述目标对象的交互意图,且显示在智能设备上的融合动画。2.根据权利要求1所述交互的反馈方法,其特征在于,获取目标对象的交互意图,包括:采集所述目标对象与所述智能设备进行对话交互的实时交互信息,其中,所述实时交互信息包括以下至少之一:目标对象发出的语音信息、目标对象输入的文本信息;对所述实时交互信息进行语义解析,根据所述语义解析的结果确定所述目标对象的交互意图。3.根据权利要求1所述交互的反馈方法,其特征在于,在所述技能服务收到所述交互意图的情况下,获取所述技能服务根据所述交互意图确定的反馈信息,包括:在所述交互意图中存在多个语料的情况下,对所述交互意图进行语料筛选,以确定出用于在所述技能服务进行查询的查询语料;在所述查询语料添加上所述目标对象的标识信息,得到目标查询语料;将所述目标查询语料传输至所述技能服务中进行查询,以确定出与所述目标查询语料对应的反馈信息,其中,所述反馈信息包含以下至少之一:技能服务反馈的文本信息、技能服务反馈的语音信息。4.根据权利要求1所述交互的反馈方法,其特征在于,读取所述反馈信息携带的目标内容,基于所述目标内容确定所述虚拟对象的目标唇形动作,包括:读取所述反馈信息中携带的目标内容;生成与所述目标内容对应的口型数据,获取所述口型数据中的唇形特征;汇总所述唇形特征确定出所述反馈信息对应的所述虚拟对象的目标唇形动作。5.根据权利要求1所述交互的反馈方法,其特征在于,将所述目标动作与所述目标唇形动作进行融合,得到用于反馈所述目标对象的交互意图,且显示在智能设备上的融合动画,包括:将所述目标动作与所述目标唇形动作输入到虚拟对象模型中,以得到用于反馈所述目标对...

【专利技术属性】
技术研发人员:于航滨
申请(专利权)人:海尔智家股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1