一种基于增强现实和可穿戴设备的人机交互系统及方法技术方案

本发明专利技术涉及一种基于增强现实和可穿戴设备的人机交互系统及方法，包括将可穿戴设备佩戴于使用者身体的特定部位处，采集使用者身体特定部位的肌电信号和可穿戴设备自身的姿态信息；基于所采集到的信息生成操作指令，并基于操作指令控制增强现实设备，以实现场景更新，并同时向使用者提供视觉、听觉反馈，并返回触觉反馈指令；基于触觉反馈指令控制可穿戴设备，以对使用者执行触觉反馈。通过以上系统和方法，本发明专利技术提供了一个完整的闭环人机交互系统和方法，使用者可通过穿戴式设备控制增强现实设备，并获得视觉、听觉、触觉反馈，从而获得更深层次更真实的交互体验。

【技术实现步骤摘要】
一种基于增强现实和可穿戴设备的人机交互系统及方法
本专利技术涉及人机交互领域，尤其涉及一种可穿戴设备、增强现实人机交互系统及方法。
技术介绍
自虚拟现实技术和人机交互技术诞生以来，交互设备及应用得到了飞速发展，尤其是近年来成熟的虚拟现实设备的普及促进了虚拟现实技术及人机交互技术进一步发展。但在虚拟现实场景下，使用者的感观被完全隔离在虚拟场景内，缺少与真实环境的交互，从而使得使用者在使用虚拟现实设备时，会产生眩晕、恶心等不适的生理现象。增强现实技术被提出之后，随着随身电子产品运算能力的提升，增强现实技术逐渐应用于小型化电子设备。相较于虚拟现实技术，增强现实技术能够在真实环境下为使用者提供虚拟影像，加强了使用者与真实环境的交互，同时至少在一定程度上避免了虚拟现实技术中亟待解决的产生眩晕、恶心等不适的生理现象的问题。增强现实技术与人机交互技术在增强现实技术应用中高度结合。现有的增强现实人机交互中，有些可采用物理控制器进行使用者与增强现实设备之间的交互，该种方式通常需要占用使用者的双手以进行相应的控制和操作，从而会影响与真实环境交互的真实感；有些也可采用声音进行使用者与增强现实设备之间的交互本文档来自技高网...

【技术保护点】
一种人机交互系统，包括：可穿戴设备，所述可穿戴设备佩戴于使用者身体的特定部位处；上位机；服务器；增强现实设备；其中，所述可穿戴设备、所述上位机、所述服务器与所述增强现实设备之间通信连接；其特征在于：所述可穿戴设备采集使用者身体特定部位的肌电信号和所述可穿戴设备自身的姿态信息，并传输至所述上位机；所述上位机基于所述可穿戴设备采集的信息生成解析结果，并传输至所述服务器；所述服务器基于所述上位机的解析结果生成相应的操作指令，并传输至所述增强现实设备；所述增强现实设备基于所述服务器生成的操作指令实现场景更新，同时向使用者提供视觉和听觉反馈，并通过所述服务器和所述上位机向所述可穿戴设备返回触觉反馈指令；...

【技术特征摘要】
1.一种人机交互系统，包括：可穿戴设备，所述可穿戴设备佩戴于使用者身体的特定部位处；上位机；服务器；增强现实设备；其中，所述可穿戴设备、所述上位机、所述服务器与所述增强现实设备之间通信连接；其特征在于：所述可穿戴设备采集使用者身体特定部位的肌电信号和所述可穿戴设备自身的姿态信息，并传输至所述上位机；所述上位机基于所述可穿戴设备采集的信息生成解析结果，并传输至所述服务器；所述服务器基于所述上位机的解析结果生成相应的操作指令，并传输至所述增强现实设备；所述增强现实设备基于所述服务器生成的操作指令实现场景更新，同时向使用者提供视觉和听觉反馈，并通过所述服务器和所述上位机向所述可穿戴设备返回触觉反馈指令；所述可穿戴设备基于返回的所述触觉反馈指令对使用者执行触觉反馈。2.根据权利要求1所述的系统，其中，所述可穿戴设备进一步被配置为对所采集到的肌电信号和姿态信息进行预处理。3.根据权利要求1所述的系统，其中，所述上位机进一步被配置为将肌电信号和姿态信息的解析结果交叉融合。4.根据权利要求1所述的系统，其中，所述上位机进一步被配置为引导所述可穿戴设备的使用者做出特定的动作。5.根据权利要求1所述的系统，其中，所述...

【专利技术属性】
技术研发人员：朱向阳，郝德宏，盛鑫军，
申请(专利权)人：上海念通智能科技有限公司，上海交通大学，
类型：发明
国别省市：上海,31