一种基于AI的VR教学交互系统及方法技术方案

技术编号:35475300 阅读:24 留言:0更新日期:2022-11-05 16:23
本发明专利技术公开了一种基于AI的VR教学交互系统及方法,包括蓝牙VR眼镜、VR设备、蓝牙信号处理单元;蓝牙VR眼镜包括第一MCU、姿态检测单元、语音单元、第一蓝牙单元;姿态检测单元、语音单元、第一蓝牙单元与第一MCU连接;姿态检测单元用于检测用户头部运动轨迹并生成视角交互指令;语音单元用于获取用户语音信号并生成语音交互指令;第一MCU用于对视角交互指令、语音交互指令进行处理后,通过第一蓝牙单元、蓝牙信号处理单元传输到VR设备;VR设备用于在接收到视角交互指令、语音交互指令后播放对应视角或者语音内容的3D内容到蓝牙VR眼镜。还公开了一种方法。解决了现有VR教学中手被占用,无法使用更多的肢体语言和辅助教学用具,VR教学效果差的问题。效果差的问题。效果差的问题。

【技术实现步骤摘要】
一种基于AI的VR教学交互系统及方法


[0001]本专利技术涉及VR教学
,特别涉及一种基于AI的VR教学交互系统及方法。

技术介绍

[0002]在进行VR教学活动中,教师需要手持操控笔操作VR设备上的3D模型进行VR教学,由于手被操控笔占用,教师就不能使用更多的肢体语言和辅助教学用具。

技术实现思路

[0003]现有VR教学技术中,由于教师手被交互工具操控笔占用,无法使用更多的肢体语言和辅助教学用具,降低了VR教学效果。
[0004]针对上述问题,提出一种基于AI的VR教学交互系统及方法,通过在蓝牙VR眼镜100中设置语音单元112,教师可以通过语音信号与VR交互,进行VR教学活动,而不必受限于操控笔或控制手柄,解放了教师的双手,解决了现有VR教学技术中由于教师手被交互工具操控笔或控制手柄占用,无法使用更多的肢体语言和辅助教学用具,VR教学效果差的问题。
[0005]一种基于AI的VR教学交互系统,包括:
[0006]蓝牙VR眼镜;
[0007]VR设备;
[0008]蓝牙信号处理单元;
[0009]所述蓝牙VR眼镜包括:
[0010]第一MCU;
[0011]姿态检测单元;
[0012]语音单元;
[0013]第一蓝牙单元;
[0014]所述蓝牙信号处理单元与所述VR设备接口连接;
[0015]所述蓝牙VR眼镜通过所述第一蓝牙单元、蓝牙信号处理单元与所述VR设备通讯连接;
[0016]所述姿态检测单元、语音单元、第一蓝牙单元与所述第一MCU连接;
[0017]所述姿态检测单元用于检测用户头部运动轨迹并生成视角交互指令;
[0018]所述语音单元用于获取用户语音信号并生成语音交互指令;
[0019]所述第一MCU用于对所述视角交互指令、语音交互指令进行处理后,通过所述第一蓝牙单元、蓝牙信号处理单元传输到所述VR设备;
[0020]所述VR设备用于在接收到所述视角交互指令、语音交互指令后播放对应视角或者语音内容的3D内容到蓝牙VR眼镜。
[0021]结合本专利技术第一方面所述的基于AI的VR教学交互系统,第一种可能的实施方式中,所述蓝牙VR眼镜还包括:
[0022]反馈单元;
[0023]所述反馈单元与所述第一MCU连接;
[0024]所述反馈单元用于在所述VR设备捕获到语音交互指令对应的3D模型或者物品后提醒用户;
[0025]所述反馈单元包括:
[0026]驱动电路;
[0027]输出单元;
[0028]所述驱动电路与所述输出单元连接;
[0029]所述输出单元包括喇叭、振动器、指示LED中的一种或多种。
[0030]结合本专利技术第一方面第一种可能的实施方式,第二种可能的实施方式中,所述蓝牙VR眼镜还包括:
[0031]手动控制单元;
[0032]所述手动控制单元与所述第一MCU连接;
[0033]所述手动控制单元用于获取手动按键信号并生成手动交互指令;
[0034]所述第一MCU对所述手动交互指令处理后通过所述第一蓝牙单元、蓝牙信号处理单元传输到所述VR设备,所述VR设备在接收到所述手动交互指令后播放对应手动控制内容的3D内容到蓝牙VR眼镜。
[0035]结合本专利技术第一方面第二种可能的实施方式,第三种可能的实施方式中,所述手动控制单元包括:
[0036]方向按键电路;
[0037]缩放按键电路;
[0038]所述手动控制内容包括:向上旋转3D模型或物品、向下旋转3D模型或物品、向左旋转3D模型或物品、向右旋转3D模型或物品、放大3D模型或物品及缩小3D模型或物品。
[0039]结合本专利技术第一方面第三种可能的实施方式,第四种可能的实施方式中,所述语音单元包括:
[0040]音频输入电路;
[0041]指令存储单元;
[0042]所述音频输入电路用于获取用户语音音频信号;
[0043]所述第一MCU用于对所述用户语音音频信号进行分析后从所述指令存储单元调取对应的语音交互指令。
[0044]结合本专利技术第一方面第四种可能的实施方式,第五种可能的实施方式中,所述蓝牙信号处理单元包括:
[0045]第二蓝牙单元;
[0046]第二MCU;
[0047]接口单元;
[0048]所述第二MCU与所述第二蓝牙单元、接口单元连接;
[0049]所述第二蓝牙单元用于与所述第一蓝牙单元建立蓝牙通讯连接;
[0050]所述第二MCU用于对接收的视角交互指令、语音交互指令或者手动交互指令进行处理,获取对应交互指令的数字信号;
[0051]所述接口单元用于将交互指令的数字信号传输到所述VR设备。
[0052]结合本专利技术第一方面第五种可能的实施方式,第六种可能的实施方式中,所述姿态检测单元为九轴运动传感器;
[0053]所述九轴运动传感器包括加速度计、陀螺仪和磁强计。
[0054]第二方面,一种基于AI的VR教学交互方法,采用第一方面所述的系统,包括:
[0055]步骤100、用户向蓝牙VR眼镜发出语音交互指令并利用蓝牙通讯协议将所述语音交互指令发送到蓝牙信号处理单元;
[0056]步骤200、所述蓝牙信号处理单元将接收到的语音交互指令蓝牙信号转换为数字信号后传输给VR设备;
[0057]步骤300、VR设备根据所述语音交互指令的内容播放3D模型或物品;
[0058]其中,所述步骤300包括:
[0059]步骤310、根据语音交互指令的内容放大3D模型或物品、缩小3D模型或物品或者将3D模型或物品向左/右/上/下旋转。
[0060]结合第二方面所述的基于AI的VR教学交互方法,第一种可能的实施方式中,所述步骤100包括:
[0061]步骤110、获取用户语音交互声音信号并进行声电转换,将声音电信号转换为交互指令模拟电信号;
[0062]步骤120、对所述交互指令模拟电信号滤波后进行A/D转换,获取交互指令数字信号;
[0063]步骤130、所述第一MCU对所述交互指令数字信号进行滤波及降噪处理;
[0064]步骤140、根据滤波及降噪处理后的语音交互指令数字信号,从存储单元指令集中调取对应的第一语音交互指令有效数字信号;
[0065]步骤150、第一蓝牙单元将所述第一语音交互指令有效数字信号发送到蓝牙信号处理单元。
[0066]结合第二方面第一种可能的实施方式,第二种可能的实施方式中,所述步骤200包括:
[0067]步骤210、第二蓝牙单元将接收到的语音交互指令蓝牙信号进行解调及A/D转换后传输到第二MCU;
[0068]步骤220、第二MCU对语音交互指令数字信号进行滤波,获取第二语音交互指令有效数字信号;
[0069]步骤230、接口单元本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种基于AI的VR教学交互系统,其特征在于,包括:蓝牙VR眼镜;VR设备;蓝牙信号处理单元;所述蓝牙VR眼镜包括:第一MCU;姿态检测单元;语音单元;第一蓝牙单元;所述蓝牙信号处理单元与所述VR设备接口连接;所述蓝牙VR眼镜通过所述第一蓝牙单元、蓝牙信号处理单元与所述VR设备通讯连接;所述姿态检测单元、语音单元、第一蓝牙单元与所述第一MCU连接;所述姿态检测单元用于检测用户头部运动轨迹并生成视角交互指令;所述语音单元用于获取用户语音信号并生成语音交互指令;所述第一MCU用于对所述视角交互指令、语音交互指令进行处理后,通过所述第一蓝牙单元、蓝牙信号处理单元传输到所述VR设备;所述VR设备用于在接收到所述视角交互指令、语音交互指令后播放对应视角或者语音内容的3D内容到蓝牙VR眼镜。2.根据权利要求1所述的基于AI的VR教学交互系统,其特征在于,所述蓝牙VR眼镜还包括:反馈单元;所述反馈单元与所述第一MCU连接;所述反馈单元用于在所述VR设备捕获到语音交互指令对应的3D模型或者物品后提醒用户;所述反馈单元包括:驱动电路;输出单元;所述驱动电路与所述输出单元连接;所述输出单元包括喇叭、振动器、指示LED中的一种或多种。3.根据权利要求2所述的基于AI的VR教学交互系统,其特征在于,所述蓝牙VR眼镜还包括:手动控制单元;所述手动控制单元与所述第一MCU连接;所述手动控制单元用于获取手动按键信号并生成手动交互指令;所述第一MCU对所述手动交互指令处理后通过所述第一蓝牙单元、蓝牙信号处理单元传输到所述VR设备,所述VR设备在接收到所述手动交互指令后播放对应手动控制内容的3D内容到蓝牙VR眼镜。4.根据权利要求3所述的基于AI的VR教学交互系统,其特征在于,所述手动控制单元包括:
方向按键电路;缩放按键电路;所述手动控制内容包括:向上旋转3D模型或物品、向下旋转3D模型或物品、向左旋转3D模型或物品、向右旋转3D模型或物品、放大3D模型或物品及缩小3D模型或物品。5.根据权利要求4所述的基于AI的VR教学交互系统,其特征在于,所述语音单元包括:音频输入电路;指令存储单元;所述音频输入电路用于获取用户语音音频信号;所述第一MCU用于对所述用户语音音频信号进行分析后从所述指令存储单元调取对应的语音交互指令。6.根据权利要求5所述的基于...

【专利技术属性】
技术研发人员:黄汉忠阮仕叠
申请(专利权)人:深圳未来立体教育科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1