基于大数据信息的数字人交互系统及方法技术方案

技术编号:43041738 阅读:22 留言:0更新日期:2024-10-22 14:28
本发明专利技术涉及数据交互技术领域,发明专利技术了一种基于大数据信息的数字人交互系统及方法,包括从用户交互视频中提取出交互语音特征、交互动作特征以及交互表情特征;从交互语音特征中提取出交互语音文本以及语音情感特征;分别从交互动作特征中提取出动作情感特征以及从交互表情特征中提取出表情情感特征,对语音情感特征、动作情感特征以及表情情感特征进行情感特征融合以及情感语义分析,得到交互情感语义;根据交互情感语义生成情感回复语音、情感回复表情以及情感回复动作;根据情感回复语音、情感回复表情以及情感回复动作进行数字人交互动画渲染以及视频交互。本发明专利技术可以提高数字人交互的准确率。

【技术实现步骤摘要】

本专利技术涉及数据交互,尤其涉及一种基于大数据信息的数字人交互系统及方法


技术介绍

1、“数字人”是指通过计算机技术、人工智能、虚拟现实和3d建模等技术手段创建的虚拟人类形象或数字化身,数字人可以在多个领域中发挥作用,包括娱乐、教育、医疗、客服、广告、以及社交媒体等。

2、现有的数字人交互方法多为基于模版索引的交互方法,即识别出用户的交互语义,从预设的交互模板数据库中检索出交互语义对应的交互模板,根据交互模板实现与用户的交互,实际应用时,基于模版索引的交互方法的上下文理解能力较差,难以理解用户的情感变化,且交互模板缺乏个性化,在互动时显得较为生硬,进而导致进行数字人交互时的准确率较低。


技术实现思路

1、本专利技术提供一种基于大数据信息的数字人交互系统及方法,其主要目的在于解决进行数字人交互时的准确率较低的问题。

2、为实现上述目的,本专利技术提供的一种基于大数据信息的数字人交互系统,所述系统包括特征提取模块、语音分析模块、特征融合模块、特征映射模块及视频交互模块,其中:

...

【技术保护点】

1.一种基于大数据信息的数字人交互系统,其特征在于,所述系统包括特征提取模块、语音分析模块、特征融合模块、特征映射模块及视频交互模块,其中:

2.如权利要求1所述的基于大数据信息的数字人交互系统,其特征在于,所述特征提取模块在分别从所述人员图像序列中提取出交互动作特征以及交互表情特征时,具体包括:

3.如权利要求1所述的基于大数据信息的数字人交互系统,其特征在于,所述语音分析模块在对所述交互语音特征进行语音识别以及语音情感分析,得到交互语音文本以及语音情感特征时,具体包括:

4.如权利要求3所述的基于大数据信息的数字人交互系统,其特征在于,所述语音分析...

【技术特征摘要】

1.一种基于大数据信息的数字人交互系统,其特征在于,所述系统包括特征提取模块、语音分析模块、特征融合模块、特征映射模块及视频交互模块,其中:

2.如权利要求1所述的基于大数据信息的数字人交互系统,其特征在于,所述特征提取模块在分别从所述人员图像序列中提取出交互动作特征以及交互表情特征时,具体包括:

3.如权利要求1所述的基于大数据信息的数字人交互系统,其特征在于,所述语音分析模块在对所述交互语音特征进行语音识别以及语音情感分析,得到交互语音文本以及语音情感特征时,具体包括:

4.如权利要求3所述的基于大数据信息的数字人交互系统,其特征在于,所述语音分析模块在根据所述交互语音特征和所述语音音素特征生成语音情感特征时,具体包括:

5.如权利要求1所述的基于大数据信息的数字人交互系统,其特征在于,所述特征融合模块在对所述语音情感特征、所述动作情感特征以及所述表情情感特征进行情感特征融合以及情感语义分析,得到交互情...

【专利技术属性】
技术研发人员:孙文化李选正
申请(专利权)人:深圳时空数字科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1