The invention discloses a wearable augmented reality guidance system and method of EMG based on sensing technology, including wearable augmented reality wearable device module and EMG sensing device module; wearable EMG sensing device module includes a motion capture unit; action recognition unit; configuration unit; the first network transmission unit; processing control unit. The invention can capture more action information and is not affected by environmental noise, which lays the foundation for realizing more convenient and accurate interaction, and has wide application prospect in the increasingly complicated industrial application field.
【技术实现步骤摘要】
基于肌电感知技术的可穿戴增强现实作业指导系统及方法
本专利技术涉及增强现实
,尤其涉及一种基于肌电感知技术的可穿戴增强现实作业指导系统及方法。
技术介绍
在工业生产领域,随着工业4.0的发展,各种新兴的作业指导系统层出不穷,基于增强现实(AugmentedReality,简称AR)技术的工业指导应用便是其中之一。增强现实技术将原本在现实世界的一定时间空间范围内难以观察到的数据信息,通过模拟仿真后叠加到真实世界,被人类所感知,从而实现超越现实的感官体验。可穿戴增强现实设备能够跟随工人在车间现场随意变动位置,能够将指导说明虚拟信息叠加到真实世界,从而满足实时指导的需求。现有的工业增强现实应用的交互方式主要有基于图像的手势识别和基于语音的指令识别两种。基于图像的手势识别通过摄像头采集手势信息并进行识别,其缺点是对周围环境光线较为敏感,并且受限于摄像头的角度;基于语音的指令识别通过采集操控者的特定语音指令进行对应的操作,主要缺点是受环境噪声影响较大,特别是在工业应用领域,许多场景都在强环境噪声下运行。
技术实现思路
本专利技术的目的就是为了解决上述难题,提供了一种基于肌 ...
【技术保护点】
一种基于肌电感知技术的可穿戴增强现实作业指导系统,其特征在于,包括:可穿戴增强现实设备模块和可穿戴肌电感知设备模块;所述可穿戴肌电感知设备模块包括:动作捕捉单元:实时抓取用户手臂的肌电信号,并将肌电信号编码后发送至动作识别单元;动作识别单元:接收肌电信号,关联分析当前用户动作,并将识别的动作事件传输至处理控制单元;配置单元:用于配置系统运行时的必要参数,包含:通信地址信息、用户个性训练模型;第一网络传输单元:用于实现与可穿戴增强现实设备模块的通信;处理控制单元:系统启动时读取配置单元数据初始化,并将识别的动作事件发送至可穿戴增强现实设备模块。
【技术特征摘要】
1.一种基于肌电感知技术的可穿戴增强现实作业指导系统,其特征在于,包括:可穿戴增强现实设备模块和可穿戴肌电感知设备模块;所述可穿戴肌电感知设备模块包括:动作捕捉单元:实时抓取用户手臂的肌电信号,并将肌电信号编码后发送至动作识别单元;动作识别单元:接收肌电信号,关联分析当前用户动作,并将识别的动作事件传输至处理控制单元;配置单元:用于配置系统运行时的必要参数,包含:通信地址信息、用户个性训练模型;第一网络传输单元:用于实现与可穿戴增强现实设备模块的通信;处理控制单元:系统启动时读取配置单元数据初始化,并将识别的动作事件发送至可穿戴增强现实设备模块。2.如权利要求1所述的一种基于肌电感知技术的可穿戴增强现实作业指导系统,其特征在于,所述可穿戴增强现实设备模块包括:控制单元:接收可穿戴肌电感知设备模块的动作事件识别结果,更新系统场景;识别单元:捕捉用户视野,通过图像处理分析用户环境,寻找定位点;增强现实单元:接收控制单元指令展示对应的模型或信息;第二网络传输单元:用于实现可穿戴增强现实设备模块和可穿戴肌电感知设备模块的通信。3.一种基于肌电感知技术的可穿戴增强现实作业指导方法,其特征在于,包括:(1)通过肢体动作训练场景进行肢体动作训练,训练结果保存为用户个性训练模型;(2)设定定位点,所述定位点为真实环境的位置点到虚拟场景空间的映射点;(3)建立虚拟场景中包含所有设备和零部件的3D模型,部署3D模型在虚拟场景的位置,录入虚拟场景内的工艺流程和每个步骤的详细指导说明;(4)实时分析用户视野环境,根据真实环境定位点的位置,将虚拟场景内容重叠到真实环境中;(5)实时记录并分析用户肌电信号数据,通过用户个性训练模型判断用户是否完成了一个已定义的动作;(6)如果完成了已定义的动作,则结合当前场景状态做出动作响应;否则,返回步骤(5)。4.如权利要求3所述的一种基于肌电感知技术的可穿戴增强现实作...
【专利技术属性】
技术研发人员:张镇,梁波,史云飞,
申请(专利权)人:山东万腾电子科技有限公司,
类型:发明
国别省市:山东,37
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。