一种人机交互系统技术方案

本实用新型专利技术公开一种人机交互系统，涉及人机交互技术领域，为解决用户进行虚拟现实技术的人机交互活动的操作便利性较低的问题。所述人机交互系统包括可穿戴设备和显示设备，可穿戴设备包括摄像头、存储器、处理器和投影镜头；摄像头用于采集用户的当前手势图像和显示设备的显示图像；处理器用于将当前手势图像与存储器中预存的手势进行匹配，根据匹配出的手势的手势类别，查找预设的与匹配出的手势的手势类别对应的虚拟工具图像；投影镜头用于在可穿戴设备前方投影出包括虚拟工具图像和显示设备的显示图像的虚拟图像。本实用新型专利技术提供的人机交互系统用于人机交互活动。

【技术实现步骤摘要】

本技术涉及人机交互
，尤其涉及一种人机交互系统。
技术介绍
随着电子信息科学技术的发展，人与计算机的交互活动在人们的日常生活中占据了重要的地位，其中，结合虚拟现实技术利用人的动作进行人机交互活动也成为了人机交互活动的一个主要发展趋势。现有技术中，结合虚拟现实技术进行人机交互活动时，用户需要与计算机直接接触，或者使用实体输入装置对计算机发出操作指令。比如，用户对计算机进行触摸操作，从而实现计算机的各种功能，或者，计算机连接有鼠标和键盘，用户利用鼠标和键盘对计算机发出操作指令，从而实现计算机的各种功能。但是，由于用户需要使用实体物理装置来操作计算机的方式较为复杂，使得用户进行虚拟现实技术的人机交互活动的操作便利性较低。
技术实现思路
本技术的目的在于提供一种人机交互系统，用于提高用户进行虚拟现实技术的人机交互活动的操作便利性。为了实现上述目的，本技术提供如下技术方案：一种人机交互系统，包括：可穿戴设备和显示设备；所述可穿戴设备包括摄像头、存储器、处理器和投影镜头；所述摄像头、投影镜头、存储器分别与所述处理器信号连接，所述摄像头用于采集用户的当前手势图像和所述显示设备的显示图像，并提供给处理器；所述处理器用于将所述当前手势图像与所述存储器中预存的手势进行匹配，根据匹配出的手势的手势类别，查找预设的与所述匹配出的手势的手势类别对应的虚拟工具图像，并将所述虚拟工具图像和所述显示设备的显示图像提供给投影镜头；所述投影镜头用于在所述可穿戴设备前方投影出包括所述虚拟工具图像
和所述显示设备的显示图像的虚拟图像。本技术提供的人机交互系统中，摄像头采集用户的当前手势图像和显示设备的显示图像，处理器将当前手势图像与存储器中预存的手势进行匹配，根据匹配出的手势的手势类别，查找预设的与匹配出的手势的手势类别对应的虚拟工具图像，投影镜头投影出包括虚拟工具图像和显示设备的显示图像的虚拟图像。与需要利用物理实体装置实现人机交互活动的现有技术相比，本技术利用用户的手势就能生成控制指令，生成与控制指令对应的虚拟工具图像，使用户能够通过可穿戴设备看到包括虚拟工具图像和显示设备的显示图像的虚拟图像，不需要特意使用物理实体装置对显示设备进行操作，就能够实现虚拟现实技术中的人机交互活动，提高了用户进行虚拟现实技术的人机交互活动的操作便利性。附图说明此处所说明的附图用来提供对本技术的进一步理解，构成本技术的一部分，本技术的示意性实施例及其说明用于解释本技术，并不构成对本技术的不当限定。在附图中：图1为本技术实施例一中人机交互系统的结构示意图；图2为本技术实施例三、四中人机交互系统的结构示意图；图3为本技术实施例三中智能眼镜的结构示意图；图4为本技术实施例二中人机交互系统的结构示意图；图5为本技术实施例四中人机交互系统的结构示意图；图6为本技术实施例四中用户的视觉效果图。附图标记：10-人机交互系统，11-可穿戴设备，12-显示设备，13-镜片，14-镜架，15-虚拟笔，16-智能眼镜，111-摄像头，112-存储器，113-处理器，114-投影镜头，115-信息发送接口，141-镜框，142-镜腿，1111-图像处理器，1131-比较电路。具体实施方式为了进一步说明本技术实施例提供的人机交互系统，下面结合说明
书附图进行详细描述。实施例一请参阅图1，本技术实施例提供的人机交互系统10包括可穿戴设备11和显示设备12，可穿戴设备11包括摄像头111、存储器112、处理器113和投影镜头114；摄像头111、存储器112、投影镜头114分别与处理器113信号连接，摄像头111用于采集用户的当前手势图像和显示设备12的显示图像，并将当前手势图像和显示设备12的显示图像提供给处理器113，具体的，摄像头111也可以替换为拍照镜头或图像传感器等具有图像采集功能的结构；处理器113用于将当前手势图像与存储器112中预存的手势进行匹配，根据匹配出的手势的手势类别，查找预设的与匹配出的手势的手势类别对应的虚拟工具图像，并将虚拟工具图像和显示设备12的显示图像提供给投影镜头114，虚拟工具图像为某种工具的虚拟显示图像，如虚拟笔的图像、虚拟放大镜的图像或虚拟手枪的图像等，需要说明的是，存储器112中存储有手势数据库，手势数据库中包括多种手势以及多种手势自身的各类属性或特征，其中，手势类别就是手势自身的一种属性，在具体实施过程中，存储器112还具有自学习的功能，能够将学习到的新的手势添加到手势数据库中；投影镜头114用于在可穿戴设备11前方投影出包括虚拟工具图像和显示设备12的显示图像的虚拟图像，且该虚拟图像会根据摄像头111采集到的当前手势图像和显示设备的显示图像进行实时更新，也就是说，投影镜头114能够投影出连贯的画面；具体的，显示设备12具体可以为智能手机、平板电脑等便于携带的手持显示终端，在此并不限定。本技术提供的人机交互系统10中，摄像头111采集用户的当前手势图像和显示设备的显示图像，处理器113将当前手势图像与存储器112中预存的手势进行匹配，根据匹配出的手势的手势类别，查找预设的与匹配出的手势的手势类别对应的虚拟工具图像，投影镜头114投影出包括虚拟工具图像和显示设备12的显示图像的虚拟图像。与需要利用物理实体装置实现人机交互活动的现有技术相比，本技术利用用户的手势就能生成控制指令，
生成与控制指令对应的虚拟工具图像，使用户能够通过可穿戴设备看到包括虚拟工具图像和显示设备的显示图像的虚拟图像，不需要特意使用物理实体装置对显示设备进行操作，就能够实现虚拟现实技术中的人机交互活动，提高了用户进行虚拟现实技术的人机交互活动的操作便利性。实施例二请参阅图4，在实施例一的基础上，可穿戴设备11还包括信息发送接口115，信息发送接口115与处理器113信号连接，用于将处理器根据手势类别提供的控制指令发送给显示设备12，信息发送接口115可以根据可穿戴设备11与显示设备12之间使用的通信技术而定，可穿戴设备11与显示设备12之间能够通过有线连接，也可以通过无线连接，优选无线连接，比如利用WiFi(WIreless-Fidelity，无线宽带)、蓝牙、ZigBee(紫蜂协议)等无线通讯手段进行通信，从而使用对应的信息发送接口115，信息发送接口115优选为无线接口，具体的，信息发送接口115可以为WiFi模块、蓝牙模块、ZigBee模块等。实施例三请参阅图2和图3，可穿戴设备具体可以为智能眼镜、穿戴头盔、智能手环等设备，下面以智能眼镜16为例进行说明。智能眼镜16包括与左右眼对应的两个镜片13和用于支撑镜片的镜架14，具体的，摄像头111、存储器112、处理器113均设置在镜架14上，投影镜头114设置在镜架14或镜片13上；镜架14包括镜框141和镜腿142，镜片13设置在镜框141中，镜片13为具有投影功能的近眼透镜，显示设备12上的显示图像以及用户的手势图像均可以通过镜片13透射至佩戴智能眼镜16的用户的双眼，使得用户能够通过智能眼镜16观看虚拟工具图像和显示设备12的显示图像，或者观看虚拟工具图像、显示设备12的显示图像和用户的当本文档来自技高网...

【技术保护点】
一种人机交互系统，其特征在于，包括：可穿戴设备和显示设备；所述可穿戴设备包括摄像头、存储器、处理器和投影镜头；所述摄像头、投影镜头、存储器分别与所述处理器信号连接，所述摄像头用于采集用户的当前手势图像和所述显示设备的显示图像，并提供给处理器；所述处理器用于将所述当前手势图像与所述存储器中预存的手势进行匹配，根据匹配出的手势的手势类别，查找预设的与所述匹配出的手势的手势类别对应的虚拟工具图像，并将所述虚拟工具图像和所述显示设备的显示图像提供给投影镜头；所述投影镜头用于在所述可穿戴设备前方投影出包括所述虚拟工具图像和所述显示设备的显示图像的虚拟图像。

【技术特征摘要】
1.一种人机交互系统，其特征在于，包括：可穿戴设备和显示设备；所述可穿戴设备包括摄像头、存储器、处理器和投影镜头；所述摄像头、投影镜头、存储器分别与所述处理器信号连接，所述摄像头用于采集用户的当前手势图像和所述显示设备的显示图像，并提供给处理器；所述处理器用于将所述当前手势图像与所述存储器中预存的手势进行匹配，根据匹配出的手势的手势类别，查找预设的与所述匹配出的手势的手势类别对应的虚拟工具图像，并将所述虚拟工具图像和所述显示设备的显示图像提供给投影镜头；所述投影镜头用于在所述可穿戴设备前方投影出包括所述虚拟工具图像和所述显示设备的显示图像的虚拟图像。2.根据权利要求1所述的人机交互系统，其特征在于，所述可穿戴设备还包括信息发送接口，所述信息发送接口与所述处理器信号连接，用于向显示设备发送所述处理器根据所述手势类别提供的控制指令。3.根据权利要求1所述的人机交互系统，其特征在于，所述可穿戴设备为智能眼镜，所述智能眼镜包括镜架和镜片，以及设置在所述镜架上的所述摄像头、所述存储器、所述处理器和设置在所述镜架或所述镜片上的所述...

【专利技术属性】
技术研发人员：卢永春，
申请(专利权)人：京东方科技集团股份有限公司，
类型：新型
国别省市：北京;11