一种眼齿混合交互的无人装备控制方法及系统技术方案

本发明专利技术公开一种眼齿混合交互的无人装备控制方法及系统，方法包括：基于眼动动作数据与预设眼动交互规则进行匹配，得到与眼动动作数据相关联的界面控制指令，使在用户交互界面的相应区域内移动光标；获取当前用户眼睛的眼睑数据；判断在预设时间内用户是否存在正常闭眼状态以及正常闭眼状态相对应的正常闭眼次数是否大于预设阈值；若在预设时间内用户存在正常闭眼状态以及正常闭眼状态相对应的正常闭眼次数大于预设阈值，则停止生成界面控制指令，使光标停滞在相应区域的目标位置；基于获取的当前用户的牙齿动作，对目标位置进行生成控制指令。解决了在交互过程中通过手势或者遥控器等操作进行配合，造成使用场景受限的问题。题。题。

【技术实现步骤摘要】
一种眼齿混合交互的无人装备控制方法及系统


[0001]本专利技术属于虚拟控制
，尤其涉及一种眼齿混合交互的无人装备控制方法及系统。

技术介绍

[0002]增强现实眼镜眼动交互方法可以的通过眼睛进行目标选取、移动和标注，但对目标的进一步操作具有局限性，需要通过手势或者遥控器等操作进行配合，而在有些特殊场景（单兵双手持抢情况下等）很难进行快速操作。

技术实现思路

[0003]本专利技术提供一种眼齿混合交互的无人装备控制方法及系统，用于解决在交互过程中通过手势或者遥控器等操作进行配合，造成使用场景受限的技术问题。
[0004]第一方面，本专利技术提供一种眼齿混合交互的无人装备控制方法，包括：获取当前用户眼睛的眼动动作数据；基于所述眼动动作数据与预设眼动交互规则进行匹配，得到与所述眼动动作数据相关联的界面控制指令，使在用户交互界面的相应区域内移动光标；获取在得到所述界面控制指令的预设时间内，当前用户眼睛的眼睑数据，其中，所述眼睑数据中包含用户的正常闭眼状态以及与所述正常闭眼状态相对应的正常闭眼次数；判断在预设时间内用户是否存在正常闭眼状态以及所述正常闭眼状态相对应的正常闭眼次数是否大于预设阈值；若在预设时间内用户存在正常闭眼状态以及所述正常闭眼状态相对应的正常闭眼次数大于预设阈值，则停止生成界面控制指令，使所述光标停滞在相应区域的目标位置；基于获取的当前用户的牙齿动作，对所述目标位置进行生成控制指令。
[0005]进一步地，所述获取当前用户眼睛的眼动动作数据，包括：获取用户在交互过程中的三维眼动数据信息；将所述三维眼动数据信息进行映射处理，得到所述三维眼动数据信息所对应的二维眼动数据信息；根据预设判断规则对所述二维眼动数据进行处理，得到眼动动作数据。
[0006]进一步地，其中，所述预设眼动交互规则包括眼球上移生成光标上移控制指令、眼球下移生成光标下移控制指令、眼球左移生成光标左移控制指令以及眼球右移生成光标右移控制指令；所述基于所述眼动动作数据与预设眼动交互规则进行匹配，得到与所述眼动动作数据相关联的界面控制指令，包括：基于眼球上移动作数据与预设眼动交互规则进行匹配，得到与所述眼球上移动作数据相关联的光标上移控制指令；基于眼球下移动作数据与预设眼动交互规则进行匹配，得到与所述眼球下移动作数据相关联的光标下移控制指令；基于眼球左移动作数据与预设眼动交互规则进行匹配，得到与所述眼球左移动作数据相关联的光标左移控制指令；基于眼球右移动作数据与预设眼动交互规则进行匹配，得到与所述眼球右移动作数据相关联的光标右移控制指令。
[0007]进一步地，在判断在预设时间内用户是否存在正常闭眼状态以及所述正常闭眼状态相对应的正常闭眼次数是否大于预设阈值之后，所述方法还包括：若在预设时间内用户
存在正常闭眼状态以及所述正常闭眼状态相对应的正常闭眼次数不大于预设阈值，则暂停生成界面控制指令，并在预设的时间间隔后基于后续的眼动动作数据继续生成界面控制指令。
[0008]进一步地，在判断在预设时间内用户是否存在正常闭眼状态以及所述正常闭眼状态相对应的正常闭眼次数是否大于预设阈值之后，所述方法还包括：若在预设时间内用户不存在正常闭眼状态，则直接基于获取的当前用户的牙齿动作，对所述目标位置进行生成控制指令。
[0009]进一步地，其中，所述控制指令包括确定指令、取消指令、标识指令、机动指令和侦查指令；所述基于获取的当前用户的牙齿动作，对所述目标位置进行生成控制指令，包括：基于获取的当前用户的牙齿左咬动作，对所述目标位置进行生成确定指令；基于获取的当前用户的牙齿连续快咬动作，对所述目标位置进行生成标识指令；基于获取的当前用户的牙齿长时慢咬动作，对所述目标位置进行生成机动指令；基于获取的当前用户的牙齿间隔快咬动作，对所述目标位置进行生成侦查指令。
[0010]第二方面，本专利技术提供一种眼齿混合交互的无人装备控制系统，包括：第一获取模块，配置为获取当前用户眼睛的眼动动作数据；移动模块，配置为基于所述眼动动作数据与预设眼动交互规则进行匹配，得到与所述眼动动作数据相关联的界面控制指令，使在用户交互界面的相应区域内移动光标；第二获取模块，配置为获取在得到所述界面控制指令的预设时间内，当前用户眼睛的眼睑数据，其中，所述眼睑数据中包含用户的正常闭眼状态以及与所述正常闭眼状态相对应的正常闭眼次数；判断模块，判断在预设时间内用户是否存在正常闭眼状态以及所述正常闭眼状态相对应的正常闭眼次数是否大于预设阈值；生成模块，配置为若在预设时间内用户存在正常闭眼状态以及所述正常闭眼状态相对应的正常闭眼次数大于预设阈值，则停止生成界面控制指令，使所述光标停滞在相应区域的目标位置；控制模块，配置为基于获取的当前用户的牙齿动作，对所述目标位置进行生成控制指令。
[0011]第三方面，提供一种电子设备，其包括：至少一个处理器，以及与所述至少一个处理器通信连接的存储器，其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行本专利技术任一实施例的一种眼齿混合交互的无人装备控制方法的步骤。
[0012]第四方面，本专利技术还提供一种计算机可读存储介质，其上存储有计算机程序，所述程序指令被处理器执行时，使所述处理器执行本专利技术任一实施例的一种眼齿混合交互的无人装备控制方法的步骤。
[0013]本申请的一种眼齿混合交互的无人装备控制方法及系统，通过眼动动作进行控制用户界面的光标移动，同时根据牙齿动作生成相应控制指令，解决了在交互过程中通过手势或者遥控器等操作进行配合，造成使用场景受限的问题。并且在预设时间内用户存在正常闭眼状态以及正常闭眼状态相对应的正常闭眼次数大于预设阈值，则停止生成界面控制指令，使光标停滞在相应区域的目标位置，此时光标不会随着眼球的移动而再次移动，实现了预先选定目标位置的目的，从而通过增加眼齿混合交互的时间，能够提高交互的便捷度。
附图说明
[0014]为了更清楚地说明本专利技术实施例的技术方案，下面将对实施例描述中所需要使用
的附图作一简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0015]图1为本专利技术一实施例提供的一种眼齿混合交互的无人装备控制方法的流程图；图2为本专利技术一实施例提供的一具体实施例的一种眼齿混合交互的无人装备控制方法的流程图；图3为本专利技术一实施例提供的一种眼齿混合交互的无人装备控制系统的结构框图；图4是本专利技术一实施例提供的电子设备的结构示意图。
具体实施方式
[0016]为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0017]实施例本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种眼齿混合交互的无人装备控制方法，其特征在于，包括：获取当前用户眼睛的眼动动作数据；基于所述眼动动作数据与预设眼动交互规则进行匹配，得到与所述眼动动作数据相关联的界面控制指令，使在用户交互界面的相应区域内移动光标；获取在得到所述界面控制指令的预设时间内，当前用户眼睛的眼睑数据，其中，所述眼睑数据中包含用户的正常闭眼状态以及与所述正常闭眼状态相对应的正常闭眼次数；判断在预设时间内用户是否存在正常闭眼状态以及所述正常闭眼状态相对应的正常闭眼次数是否大于预设阈值；若在预设时间内用户存在正常闭眼状态以及所述正常闭眼状态相对应的正常闭眼次数大于预设阈值，则停止生成界面控制指令，使所述光标停滞在相应区域的目标位置；基于获取的当前用户的牙齿动作，对所述目标位置进行生成控制指令。2.根据权利要求1所述的一种眼齿混合交互的无人装备控制方法，其特征在于，所述获取当前用户眼睛的眼动动作数据，包括：获取用户在交互过程中的三维眼动数据信息；将所述三维眼动数据信息进行映射处理，得到所述三维眼动数据信息所对应的二维眼动数据信息；根据预设判断规则对所述二维眼动数据进行处理，得到眼动动作数据。3.根据权利要求1所述的一种眼齿混合交互的无人装备控制方法，其特征在于，其中，所述预设眼动交互规则包括眼球上移生成光标上移控制指令、眼球下移生成光标下移控制指令、眼球左移生成光标左移控制指令以及眼球右移生成光标右移控制指令；所述基于所述眼动动作数据与预设眼动交互规则进行匹配，得到与所述眼动动作数据相关联的界面控制指令，包括：基于眼球上移动作数据与预设眼动交互规则进行匹配，得到与所述眼球上移动作数据相关联的光标上移控制指令；基于眼球下移动作数据与预设眼动交互规则进行匹配，得到与所述眼球下移动作数据相关联的光标下移控制指令；基于眼球左移动作数据与预设眼动交互规则进行匹配，得到与所述眼球左移动作数据相关联的光标左移控制指令；基于眼球右移动作数据与预设眼动交互规则进行匹配，得到与所述眼球右移动作数据相关联的光标右移控制指令。4.根据权利要求1所述的一种眼齿混合交互的无人装备控制方法，其特征在于，在判断在预设时间内用户是否存在正常闭眼状态以及所述正常闭眼状态相对应的正常闭眼次数是否大于预设阈值之后，所述方法还包括：若在预设时间内用户存在正常闭眼状态以及所述正常闭眼状态相对应的正常闭眼次数不大于预设阈值，则暂停生成界面控制指令，并在预...

【专利技术属性】
技术研发人员：方涛，龚贻华，杜华，李石兵，郭小荣，李航标，徐花龙，吴俊强，郑项文，
申请(专利权)人：北方联创通信有限公司，
类型：发明
国别省市：