一种人机交互装置及人机交互方法制造方法及图纸

技术编号:22237534 阅读:34 留言:0更新日期:2019-10-09 17:30
本发明专利技术公开了一种人机交互装置及人机交互方法,通过监控外部对象手势/眼球转动角度,采集手势动作/眼球转动角度并将监测到的手势动作/眼球转动角度转化成相应处理指令后进行加密并送云服务终端进行比对,然后根据云服务终端比对的结果决定是否控制互动执行模块以及多个显示设备进行行为反应;触发后实时行为反应交互,实时接收外部对象手势/眼球转动角度触发转化后的处理指令,并根据指令控制互动执行模块进行行为反应从而达到与外部对象实时交互的步骤,贴合人类使用习惯,适用范围广泛,可以广泛应用于各种需要人机交互的装置上。

A Man-machine Interaction Device and Man-machine Interaction Method

【技术实现步骤摘要】
一种人机交互装置及人机交互方法
本专利技术涉及一种较大范围,具体是一种人机交互装置及人机交互方法。
技术介绍
进入智能时代,触摸屏技术越来越受到关注,广泛地应用于各个领域。触摸屏不仅消除了鼠标,给用户带来极大的方便之外,给人机交互这个领域,也带来了前所未有的发展。目前除了手机、电脑等小型设备的触摸技术之外,更趋向于研究大尺寸的触摸屏。通常使用的雷达触控,其成本高、触控精度低;红外框触摸屏,由于本身的技术问题,另外,现有的交互方法大多只有手势交互,关于眼部交互的方法极少。
技术实现思路
本专利技术的目的在于提供一种人机交互装置及人机交互方法,以解决上述
技术介绍
中提出的问题。为实现上述目的,本专利技术提供如下技术方案:一种人机交互装置,包括:手势识别模块,用于监控外部对象手势,采集手势并将接收到的手势转化成相应处理指令后进行中央处理;眼部识别模块,用于监控外部对象眼球转动角度,采集眼球转动角度并将接收到的眼球转动角度信息转化成相应处理指令后进行中央处理;中央处理模块,用于实时接收手势识别模块、眼部识别模块发送来的外部对象手势、眼球转动角度,并将手势、眼球转动角度进行加密后送云服务终端进行比对,然后根据云服务终端比对的结果决定是否控制互动执行模块以及多个显示设备进行行为反应;互动执行模块,用于接收中央处理模块的控制指令而后针对外部对象进行实时的行为反应;移动客户端,安装有能够与中央处理模块双向无线通讯的应用软件,用于与中央处理模块通讯;云服务终端,存储所有所述应用软件登陆的ID、密钥、方法参数名,以及与移动客户端、中央处理模块进行双向无线通讯,多个显示设备,用于接收中央处理模块的控制指令而后有针对性的进行显示。作为本专利技术进一步的方案:所述手势识别模块将识别出外部对象触控轨迹中符合特定轨迹的操作,从而快捷地执行某个功能。作为本专利技术进一步的方案:所述眼部识别模块将识别出外部对象眼球转动角度中符合特定角度的操作,从而快捷地执行某个功能。作为本专利技术进一步的方案:所述云服务终端包括:手势/眼球转动角度模型库,用于存放预设手势/眼球转动角度模型;手势/眼球转动角度信息库,用于存放预设的针对相应手势/眼球转动角度模型的特定处理指令;特征提取单元,用于从手势/眼球转动角度中提取最反应其本质属性的信息;识别搜索单元,用于根据手势/眼球转动角度的特征矢量流与预设的手势/眼球转动角度模型库中内容进行匹配,得到最适合该手势/眼球转动角度的特征的手势/眼球转动角度模型;手势/眼球转动角度分析单元,用于基于预设的手势/眼球转动角度信息库,通过对搜索得到的手势/眼球转动角度模型进行分析,得到处理指令;学习数据单元,用于存储学习期间得以进行的过程数据;动作模式数据单元,用于预存学习期间所产生行为反应的动作模式。作为本专利技术进一步的方案:所述多个显示设备之间能够进行数据交互,在数据交互过程中,从显示设备中确定一台设备为主屏,其他设备为副屏,主屏作为输入设备,副屏与主屏进行同步显示。作为本专利技术再进一步的方案:一种人机交互方法,监控外部对象手势/眼球转动角度,采集手势动作/眼球转动角度并将监测到的手势动作/眼球转动角度转化成相应处理指令后进行加密并送云服务终端进行比对,然后根据云服务终端比对的结果决定是否控制互动执行模块以及多个显示设备进行行为反应;触发后实时行为反应交互,实时接收外部对象手势/眼球转动角度触发转化后的处理指令,并根据指令控制互动执行模块进行行为反应从而达到与外部对象实时交互的步骤。与现有技术相比,本专利技术的有益效果是:本专利技术通过监控外部对象手势/眼球转动角度,采集手势动作/眼球转动角度并将监测到的手势动作/眼球转动角度转化成相应处理指令后进行加密并送云服务终端进行比对,然后根据云服务终端比对的结果决定是否控制互动执行模块以及多个显示设备进行行为反应;触发后实时行为反应交互,实时接收外部对象手势/眼球转动角度触发转化后的处理指令,并根据指令控制互动执行模块进行行为反应从而达到与外部对象实时交互的步骤,贴合人类使用习惯,适用范围广泛,可以广泛应用于各种需要人机交互的装置上。附图说明图1为人机交互装置的原理框图。具体实施方式下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本专利技术保护的范围。请参阅图1,一种人机交互装置,包括:手势识别模块,用于监控外部对象手势,采集手势并将接收到的手势转化成相应处理指令后进行中央处理;眼部识别模块,用于监控外部对象眼球转动角度,采集眼球转动角度并将接收到的眼球转动角度信息转化成相应处理指令后进行中央处理;中央处理模块,用于实时接收手势识别模块、眼部识别模块发送来的外部对象手势、眼球转动角度,并将手势、眼球转动角度进行加密后送云服务终端进行比对,然后根据云服务终端比对的结果决定是否控制互动执行模块以及多个显示设备进行行为反应;互动执行模块,用于接收中央处理模块的控制指令而后针对外部对象进行实时的行为反应;移动客户端,安装有能够与中央处理模块双向无线通讯的应用软件,用于与中央处理模块通讯;云服务终端,存储所有所述应用软件登陆的ID、密钥、方法参数名,以及与移动客户端、中央处理模块进行双向无线通讯,多个显示设备,用于接收中央处理模块的控制指令而后有针对性的进行显示。所述手势识别模块将识别出外部对象触控轨迹中符合特定轨迹的操作,从而快捷地执行某个功能。所述眼部识别模块将识别出外部对象眼球转动角度中符合特定角度的操作,从而快捷地执行某个功能。作为本专利技术进一步的方案:所述云服务终端包括:手势/眼球转动角度模型库,用于存放预设手势/眼球转动角度模型;手势/眼球转动角度信息库,用于存放预设的针对相应手势/眼球转动角度模型的特定处理指令;特征提取单元,用于从手势/眼球转动角度中提取最反应其本质属性的信息;识别搜索单元,用于根据手势/眼球转动角度的特征矢量流与预设的手势/眼球转动角度模型库中内容进行匹配,得到最适合该手势/眼球转动角度的特征的手势/眼球转动角度模型;手势/眼球转动角度分析单元,用于基于预设的手势/眼球转动角度信息库,通过对搜索得到的手势/眼球转动角度模型进行分析,得到处理指令;学习数据单元,用于存储学习期间得以进行的过程数据;动作模式数据单元,用于预存学习期间所产生行为反应的动作模式。所述多个显示设备之间能够进行数据交互,在数据交互过程中,从显示设备中确定一台设备为主屏,其他设备为副屏,主屏作为输入设备,副屏与主屏进行同步显示。本专利技术的人机交互方法通过监控外部对象手势/眼球转动角度,采集手势动作/眼球转动角度并将监测到的手势动作/眼球转动角度转化成相应处理指令后进行加密并送云服务终端进行比对,然后根据云服务终端比对的结果决定是否控制互动执行模块以及多个显示设备进行行为反应;触发后实时行为反应交互,实时接收外部对象手势/眼球转动角度触发转化后的处理指令,并根据指令控制互动执行模块进行行为反应从而达到与外部对象实时交互的步骤,贴合人类使用习惯,适用范围广泛,可以广泛应用于各种需要人机交互的装置上。对于本领域技术人员而言,显然本文档来自技高网...

【技术保护点】
1.一种人机交互装置,其特征在于,包括:手势识别模块,用于监控外部对象手势,采集手势并将接收到的手势转化成相应处理指令后进行中央处理;眼部识别模块,用于监控外部对象眼球转动角度,采集眼球转动角度并将接收到的眼球转动角度信息转化成相应处理指令后进行中央处理;中央处理模块,用于实时接收手势识别模块、眼部识别模块发送来的外部对象手势、眼球转动角度,并将手势、眼球转动角度进行加密后送云服务终端进行比对,然后根据云服务终端比对的结果决定是否控制互动执行模块以及多个显示设备进行行为反应;互动执行模块,用于接收中央处理模块的控制指令而后针对外部对象进行实时的行为反应;移动客户端,安装有能够与中央处理模块双向无线通讯的应用软件,用于与中央处理模块通讯;云服务终端,存储所有所述应用软件登陆的ID、密钥、方法参数名,以及与移动客户端、中央处理模块进行双向无线通讯,多个显示设备,用于接收中央处理模块的控制指令而后有针对性的进行显示。

【技术特征摘要】
1.一种人机交互装置,其特征在于,包括:手势识别模块,用于监控外部对象手势,采集手势并将接收到的手势转化成相应处理指令后进行中央处理;眼部识别模块,用于监控外部对象眼球转动角度,采集眼球转动角度并将接收到的眼球转动角度信息转化成相应处理指令后进行中央处理;中央处理模块,用于实时接收手势识别模块、眼部识别模块发送来的外部对象手势、眼球转动角度,并将手势、眼球转动角度进行加密后送云服务终端进行比对,然后根据云服务终端比对的结果决定是否控制互动执行模块以及多个显示设备进行行为反应;互动执行模块,用于接收中央处理模块的控制指令而后针对外部对象进行实时的行为反应;移动客户端,安装有能够与中央处理模块双向无线通讯的应用软件,用于与中央处理模块通讯;云服务终端,存储所有所述应用软件登陆的ID、密钥、方法参数名,以及与移动客户端、中央处理模块进行双向无线通讯,多个显示设备,用于接收中央处理模块的控制指令而后有针对性的进行显示。2.根据权利要求1所述的人机交互装置,其特征在于,所述手势识别模块将识别出外部对象触控轨迹中符合特定轨迹的操作,从而快捷地执行某个功能。3.根据权利要求1-2任一项所述的人机交互装置,其特征在于,所述眼部识别模块将识别出外部对象眼球转动角度中符合特定角度的操作,从而快捷地执行某个功能。4.根据权利要求1-3任一项所述的人机交互装置,其特征在于,所述云服务终端包括:手势/眼球转动角度...

【专利技术属性】
技术研发人员:彭立军
申请(专利权)人:浩博泰德北京科技有限公司
类型:发明
国别省市:北京,11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1