【技术实现步骤摘要】
一种面向矿山资源管理的基于彩色图像的手势交互系统及方法
本专利技术属于人机交互领域，尤其是涉及一种面向矿山资源管理的基于彩色图像的手势交互系统及方法。
技术介绍
随着科技的进步，用户对人机交互的要求也越来越高。传统标准的键盘鼠标交互方法虽然通用性、精度、稳定性都很高，但是在一些交互内容较为简单的场景却显得过于繁琐，因此人们希望能够拥有适用于特定场景的不同于键盘鼠标的、简便易懂的操作方式，而使用用户手势作为输入的交互方式由于其简单、易学习的特点，作为新世纪的一种新的交互解决方案开始被大规模应用。一般而言，体感交互方案有接触式与非接触式两大类方案。接触式体感交互一般是使用一些外部传感器配合标记设备来获取用户的肢体输入，该解决方案直接、精确，但是十分繁琐且昂贵，而且如果共用设备有可能会传播疾病。因此仅在一些对精度要求非常高的行业(如动画电影)中大量运用。非接触式的交互方式主要是通过光学方法来在自动获取用户的身体姿态，目前主要的方法是通过RGB相机或者深度相机来获得用户的姿态。相较于深度相机价格昂贵、使用环境受限、图像噪声大的缺陷，本申请所使用的彩色相机有若干优势：价格低...
【技术保护点】
1.一种面向矿山资源管理的基于彩色图像的手势交互系统，包括计算机存储器、计算机处理器以及存储在所述计算机存储器中并可在所述计算机处理器上执行的计算机程序，其特征在于，所述计算机存储器中存有以下模块：预处理模块，用于检测输入图像中手部区域，并对包含手部区域的图像进行预处理；手势识别模块，用于对预处理模块处理后的图像进行手势识别；手势语转化模块，内含手势语汇集，用于将手势识别模块识别出的手势转化为所述手势语汇集中对应的手势功能；指令控制模块，用于根据手势语转化模块得到的手势功能，向交互系统发送手势功能对应的指令。
【技术特征摘要】
1.一种面向矿山资源管理的基于彩色图像的手势交互系统，包括计算机存储器、计算机处理器以及存储在所述计算机存储器中并可在所述计算机处理器上执行的计算机程序，其特征在于，所述计算机存储器中存有以下模块：预处理模块，用于检测输入图像中手部区域，并对包含手部区域的图像进行预处理；手势识别模块，用于对预处理模块处理后的图像进行手势识别；手势语转化模块，内含手势语汇集，用于将手势识别模块识别出的手势转化为所述手势语汇集中对应的手势功能；指令控制模块，用于根据手势语转化模块得到的手势功能，向交互系统发送手势功能对应的指令。2.根据权利要求1所述的面向矿山资源管理的基于彩色图像的手势交互系统，其特征在于，所述预处理模块在没有检测到图像中的手时，控制所述的手势识别模块、手势语转化模块和指令控制模块保持待机状态。3.根据权利要求1所述的面向矿山资源管理的基于彩色图像的手势交互系统，其特征在于，所述预处理包括：对输入图像中手部区域产生包围盒，根据该包围盒去进行图像裁剪，得到裁剪后的手部图像，再进行尺寸归一化，得到预处理后的图片。4.根据权利要求1所述的面向矿山资源管理的基于彩色图像的手势交互系统，其特征在于，所述手势识别模块基于卷积神经网络，利用已有的手势数据集进行训练，得到数据模型。5.根据权利要求1所述的面向矿山资源管理的基于彩色图像的手势交互系统，其特征在于，所述指令控制模块分为两个部分，一部分为有穷状态机，用于实现手势的复用；另一部分为指令的发送部分，用于读取用户配置文件，并存储、发送手势对应的指令。6.根据权利要求5所述的面向矿山资源管理的基于彩色图像的手势交互系统，其特征在于，所述有穷状态机是一个五元组(Σ,S,s0,δ,F)，其中，Σ是合法输入手势的集合，S是状态的集合，s0是起始状态，δ是状态转移函数，F表示终止状态集合，在本系统中F＝S，用户通过手势实现状态间的转移，然后在不同状态给予同一个手势以不同的语义。7.一种面向矿山资源管理的基于彩...
【专利技术属性】
技术研发人员：张宏鑫，李传康，刘嘉信，
申请(专利权)人：浙江大学，
类型：发明
国别省市：浙江,33
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。