【技术实现步骤摘要】
本专利技术涉及人工智能与人机交互,具体为一种面试演讲用vr渲染虚拟考官多模态反应生成系统。
技术介绍
1、在如今的面试演讲训练准备过程中,传统的线下演讲模拟训练方式仍然占据主导地位。这种方式通常涉及组织一组真实听众,进行面对面的演讲练习,并依赖于人工提供的反馈。然而,这种方法存在一些明显的不足之处,包括高昂的成本、时间上的限制、无法重复特定的演讲场景,以及难以模拟出高压环境下的真实感受。与此同时,基于vr虚拟现实技术的演讲系统逐渐兴起,它们利用先进的虚拟现实设备来构建各种演讲场景,例如模拟的会议室或礼堂,为用户带来视觉上的沉浸式体验。尽管如此,这些系统在动态互动能力方面仍有欠缺,目前还无法实现听众的智能提问或提供实时的压力反馈。
2、目前存在的虚拟面试演讲系统面临一系列技术挑战:
3、首先,虚拟考官的反应往往显得单一,无法像真实面试中那样展现出多模态的交互方式,包括表情、语音和肢体语言的协同作用;
4、其次,打断机制通常处理得过于生硬,无法自然地模拟出真实面试中面试官的介入行为;
5、再者
...【技术保护点】
1.一种面试演讲用VR渲染虚拟考官多模态反应生成系统,其特征在于,包括:
2.根据权利要求1所述的一种面试演讲用VR渲染虚拟考官多模态反应生成系统,其特征在于:所述多模态输入解析模块实时检测分析考生状态包括压力等级、回答质量、肢体不自然度指数,同时高频处理表情变化、语音语调、眼动轨迹数据,低延迟中断机制处理异常事件。
3.根据权利要求1所述的一种面试演讲用VR渲染虚拟考官多模态反应生成系统,其特征在于:所述虚拟考官行为生成模块的反应决策中心包括数字人多维度合成模块、情境动态调控模块和打断/质疑策略生成模块;
4.根据权利要求1所述的
...【技术特征摘要】
1.一种面试演讲用vr渲染虚拟考官多模态反应生成系统,其特征在于,包括:
2.根据权利要求1所述的一种面试演讲用vr渲染虚拟考官多模态反应生成系统,其特征在于:所述多模态输入解析模块实时检测分析考生状态包括压力等级、回答质量、肢体不自然度指数,同时高频处理表情变化、语音语调、眼动轨迹数据,低延迟中断机制处理异常事件。
3.根据权利要求1所述的一种面试演讲用vr渲染虚拟考官多模态反应生成系统,其特征在于:所述虚拟考官行为生成模块的反应决策中心包括数字人多维度合成模块、情境动态调控模块和打断/质疑策略生成模块;
4.根据权利要求1所述的一种面试演讲用vr渲染虚拟考官多模态反应生成系统,其特征在于:所述情感表达协同生成网络实现表情参数、语音韵律参数和肢体动作参数的同步映射进行跨模态一致性控制,通过跨模态情感表达协同生成表情-语音-姿态三维映射系统。
5.根据权利要求4所述的一种面试演讲用vr渲染虚拟考官多模态反应生成系统,其特征在于:所述表情参数通过表情动画引擎基于 arkit 52 点面部肌肉驱动和smpl-x 骨骼动画结合微表情融合技术和表情动力学控...
【专利技术属性】
技术研发人员:张凯,
申请(专利权)人:上海演犀科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。